aml
Mini-Challenge 1
Pascal Berger und Raphael Strebel
18. Oktober 2022
R-Version: \[Default\] \[64-bit\] C:\Program Files\R\R-4.1.0
Imports
Die Daten haben wir von folgender Quelle bezogen und werden auch auf dieser genauer Beschrieben: https://sorry.vse.cz/~berka/challenge/PAST/index.html (linke Seite PKDD’99 Challenge > Data > Financial Data Description)
Einlesen der Daten
Der Datensatz besteht aus acht verschiedenen Tabellen, welche teils durch Foreign-Keys miteinander verknüpft sind.
root_path <- "./xselling_banking_data-1/xselling_banking_data/"
accounts <- read.csv(paste0(root_path, "account.csv"), header = TRUE, sep = ";")
cards <- read.csv(paste0(root_path, "card.csv"), header = TRUE, sep = ";")
clients <- read.csv(paste0(root_path, "client.csv"), header = TRUE, sep = ";")
dispositions <- read.csv(paste0(root_path, "disp.csv"), header = TRUE, sep = ";")
districts <- read.csv(paste0(root_path, "district.csv"), sep = ";")
loans <- read.csv(paste0(root_path, "loan.csv"), header = TRUE, sep = ";")
orders <- read.csv(paste0(root_path, "order.csv"), header = TRUE, sep = ";")
transactions <- read.csv(paste0(root_path, "trans.csv"), header = TRUE, sep = ";")Cleaning
Accounts
sample_n(accounts, 5)Die Account-Tabelle enthält vier Kolonnen: die Account-ID, die District-ID (welche auf die District-Tabelle verweist), die Frequenz, welche die Häufigkeit der Ausstellung der Abrechnungen als Kategorie besagt, und das Erstellungsdatum des Accounts. Die Frequenz kann eine von drei verschiedenen Werten annehmen.
unique(accounts$frequency)[1] "POPLATEK MESICNE" "POPLATEK PO OBRATU" "POPLATEK TYDNE" Nachfolgend sollen die Frequenz-Werte übersetzt und das Datum in ein richtiges Format transformiert werden. Ausserdem soll die Tabelle auf fehlende Werte überprüft werden.
accounts$date <- as.Date(as.character(accounts$date), format= "%y%m%d")
accounts$frequency[accounts$frequency == "POPLATEK MESICNE"] <- "monthly"
accounts$frequency[accounts$frequency == "POPLATEK TYDNE"] <- "weekly"
accounts$frequency[accounts$frequency == "POPLATEK PO OBRATU"] <- "after_transaction"
sum(is.na(accounts))[1] 0Wie hier gezeigt wurde, gibt es keine fehlende Werte in diesem Dataframe.
Cards
sample_n(cards, 5)Die Card-Tabelle enthält die Kolonnen Card-ID, Disp-ID (welche auf die Dispositon-Tabelle verweist), den Typ der Karte und das Ausstellungsdatum. Auch hier muss das Datum umgewandelt werden. Der zeitliche Teil wird ignoriert, da er immer 0 ist. Weiter werden Gold-Karten zu normalen Karten umgewandelt und Junior-Karten entfernt, da unser Modell das Kaufen einer normalen Karte vorhersagen soll. Auch hier werden wieder die fehlenden Werte geprüft.
cards$issued <- as.Date(as.character(cards$issued), format= "%y%m%d")
cards$type[cards$type == "gold"] <- "classic"
cards <- filter(cards, type == "classic")
sum(is.na(cards))[1] 0Es gibt keine fehlende Werte, welche weitere Aktionen erfordern würden.
Clients
sample_n(clients, 10)Die Tabelle Clients enthält die Client-ID, das Geburtsdatum und die District-ID (welche auf die District-Tabelle verweist). Der Spalte Geburtsdatum sieht man auf den ersten Blick die Datumsräpresentation nicht an. In der Doku wird aber die Struktur ersichtlich: Das Datumsformat ist für Männer YYMMDD und für Frauen YYMMDD+50DD.
In Folge wird die Nummer in ihre Datumsräpresentation konvertiert und die Spalte “gender” als male/female aufgeschlüsselt. Zudem wird das Alter der Kunden im Jahr 1999 berechnet, da der Datensatz aus diesem Jahr stammt. Anschliessend kann das Geburtsdatum entfernt werden.
Ausserdem werden auch hier wieder die fehlenden Werte überprüft.
# Months above 12 must be female
clients <- mutate(clients, gender =
ifelse(substr(birth_number, 3, 4) > 12, "female", "male"))
# Substract the 50 to get the birth month
clients <- mutate(clients, birth_month =
ifelse(as.numeric(substr(birth_number, 3, 4)) > 12,
as.numeric(substr(birth_number, 3, 4)) - 50,
as.numeric(substr(birth_number, 3, 4))))
# Transform the birth_number to a date
clients <- mutate(clients, birth_number = paste("19",
substr(birth_number, 1, 2),
str_pad(birth_month, 2,
pad = "0"),
substr(birth_number, 5, 6),
sep = "", collapse = NULL))
clients$birth_date <- as.Date(as.character(clients$birth_number),
format= "%Y%m%d")
# Remove unused columns
clients$birth_month <- NULL
clients$birth_number <- NULL
# Get the age of the clients in the year 1999 and save it in a column
get_age <- function(birth_date) {
base_year <- 99
year <- substr(birth_date, 3, 4)
result <- base_year - as.integer(year)
return(result)
}
clients <- clients %>%
mutate(age = get_age(birth_date))
clients$birth_date <- NULL
sum(is.na(clients))[1] 0Auch hier gibt es keine fehlenden Werte, welche untersucht werden müssten.
Jugendliche und Personen, welche während des Zeitraums des Datensatzes erst erwachsen worden sind, sollen nicht in die Auswertung einfliessen. Da sich der Datensatz über einen Zeitraum von sechs Jahren erstreckt, werden alle Clients jünger als 25 Jahre herausgefiltert.
clients <- clients %>% filter(age >= 25)Dispositions
sample_n(dispositions, 5)Die Tabelle Dispostions enthält die Disposition-ID, die Client-ID (welche auf die Tabelle Clients verweist), die Account-ID (welche auf die Tabelle Accounts verweist) und den Typ der Disposition. Disposition steht dabei für die Rechte eines Kunden für ein gewisses Konto. Hier sollen nur Owners verwendet werden, da die Analyse nur Eigentümer von Konten behandeln soll. Da der Type dann für jede Dispostion der gleiche ist, wird diese Variable entfernt.
dispositions <- dispositions %>% filter(type == 'OWNER')
dispositions$type <- NULL
sum(is.na(dispositions))[1] 0Auch hier gibt es keine fehlenden Werte, welche genauer untersucht werden müssten.
Districts
sample_n(districts, 5)Die Tabelle Districts enthält demographische Informationen über verschiedene Gebiete. Die Spaltennamen sind hier nur nummeriert und müssen richtig benannt werden. Dies können wir anhand der Doku machen.
districts <- rename(districts, district_id = A1, district_name = A2, region = A3,
inhabitants = A4, municipalities_inhabitants_smaller_499 = A5,
municipalities_inhabitants_500_to_1999 = A6,
municipalities_inhabitants_2000_to_9999 = A7,
municipalities_inhabitants_larger_10000 = A8, cities = A9,
urban_inhabitants_ratio = A10, average_salary = A11,
unemployment_rate_95 = A12, unemployment_rate_96 = A13,
entrepreneurs_per_1000 = A14, crimes_95 = A15,
crimes_96 = A16)
sum(is.na(districts))[1] 0Auch hier gibt es keine fehlenden Werte.
Transactions
sample_n(transactions, 5)Die Transaktions-Tabelle enthält die Kolonnen Transaktions-ID, Account-ID (welche auf die Tabelle Accounts verweist), Date (das Datum der Transaktion), Type (den Typ der Transaktion), Operation und k_symbol (weitere kategorische Informationen über die Transaktion), Amount (der absolute Wert der Transaktion), Balance (der neue Kontostand) und Informationen über die Bank und den Account.
In den Transaktionen muss das Datum gemäss Format YYMMDD konvertiert und die verschiedenen tschechischen Ausdrücke übersetzt werden. “VYDAJ” heisst übersetzt Ausgabe, “VYBER” Entnahme. Wir übersetzen hier beide Begriffe mit dem Wert “withdrawal”.
# Change formats
transactions$date <- as.Date(as.character(transactions$date), format= "%y%m%d")
transactions$amount <- as.numeric(transactions$amount)
transactions$balance <- as.numeric(transactions$balance)
# Translate values
transactions$type[transactions$type == "PRIJEM"] <- "income"
transactions$type[transactions$type == "VYDAJ"] <- "withdrawal"
transactions$type[transactions$type == "VYBER"] <- "withdrawal"
transactions$operation[transactions$operation == "VKLAD"] <- "cash credit"
transactions$operation[transactions$operation == "PREVOD Z UCTU"] <- "collection"
transactions$operation[transactions$operation == "VYBER"] <- "cash withdrawal"
transactions$operation[transactions$operation == "PREVOD NA UCET"] <- "remittance"
transactions$operation[transactions$operation == "VYBER KARTOU"] <- "card withdrawal"
transactions$k_symbol[transactions$k_symbol == "DUCHOD"] <- "pension"
transactions$k_symbol[transactions$k_symbol == "UROK"] <- "interest"
transactions$k_symbol[transactions$k_symbol == "SIPO"] <- "household"
transactions$k_symbol[transactions$k_symbol == "SLUZBY"] <- "payment statement"
transactions$k_symbol[transactions$k_symbol == "POJISTNE"] <- "insurance"
transactions$k_symbol[transactions$k_symbol == "SANKC. UROK"] <- "neg_interest"
transactions$k_symbol[transactions$k_symbol == "UVER"] <- "loan_pay"
sum(is.na(transactions))[1] 760931In dieser Spalte gibt es eine grosse Anzahl fehlender Werte. Bereits im Sample ist ersichtlich, dass bei den Kolonnen bank, k_symbol und account fehlende Werte als NA oder als leerer string vorkommen. Der Anteil fehlender Werte soll als nächstes untersucht werden.
missing_bank_percentage = round(sum(transactions$bank == '') * 100 / dim(transactions)[1], 2)
missing_k_symbol_percentage = round(sum(transactions$k_symbol == '') * 100 / dim(transactions)[1], 2)
missing_account_percentage = round(sum(is.na(transactions$account)) * 100 / dim(transactions)[1], 2)
print(paste("In der Kolonne Bank fehlen", missing_bank_percentage, "% der Werte."))[1] "In der Kolonne Bank fehlen 74.11 % der Werte."print(paste("In der Kolonne k_symbol fehlen", missing_k_symbol_percentage, "% der Werte."))[1] "In der Kolonne k_symbol fehlen 45.62 % der Werte."print(paste("In der Kolonne Account fehlen", missing_account_percentage, "% der Werte."))[1] "In der Kolonne Account fehlen 72.04 % der Werte."Bei den Kolonnen bank und account fehlen fast drei Viertel der Werte, bei k_symbol beinahe die Hälfte. Daher haben wir uns entschieden, diese Kolonnen vom Dataframe zu entfernen.
transactions$bank <- NULL
transactions$k_symbol <- NULL
transactions$account <- NULLJetzt schauen wir uns nochmals die fehlenden Werte an.
sum(is.na(transactions))[1] 0Durch das Entfernen der drei Spalten konnten alle fehlenden Werte entfernt werden. Nun besteht aber noch das Problem, dass der angegebene Betrag der Transaktionen immer positiv ist, auch wenn das Vermögen sinkt. Wir gehen also davon aus, dass immer der absolute Wert in diesere Kolonne erfasst ist. Dies müssen wir noch bereinigen, so dass der Betrag auch negativ sein kann.
Glücklicherweise gibt es eine weitere Information, welche uns bei diesem Problem weiterhilft: Die Variable “type”.
unique(transactions$type)[1] "income" "withdrawal"Es gibt nur zwei Transaktionstypen: income und withdrawal. Diese geben an, ob Geld auf das Konto fliesst oder entnommen wird. Bei Transaktionen mit Typ “withdrawal” kann also der Betrag negiert werden. Wir fügen die neuen Variabeln “difference” und “prev_balance” hinzu. Sie beschreiben den Betrag mit entsprechendem Vorzeichen und den Kontostand vor der Transaktion.
df <- transactions
# Konvertieren Sie das 'date'-Feld in ein Datum
#df$date <- as.Date(df$date)
# Sortieren Sie das Dataframe nach Nutzer und Datum. Bei gleichem Datum wird nach tranaction_id sortiert.
df <- df[order(df$account_id, df$date, df$trans_id), ]
# Gruppieren Sie das Dataframe nach Nutzer
df <- group_by(df, account_id)
# Iterieren Sie über jeden Nutzer und bearbeiten Sie die Transaktionen
df <- df %>%
summarize(transactions = {
# Die Different der Transaktion zur Vorherigen wird mittels Typ ausgelesen
difference <- ifelse(type == "withdrawal", amount, amount * -1)
# Balance ist der Kontostand nach der Transaktion, mittels difference wird der Kontostand vor Transaktion ermittelt.
prev_balance <- balance - difference
# Erstellen Sie das Dataframe mit den Transaktionen für jeden Nutzer
transactions_df <- data.frame(amount, date, balance, prev_balance, difference)
transactions_df
}) %>%
ungroup()
transactions <- unnest(df, transactions)
sample_n(transactions, 5)Orders
Die Tabelle Orders enthält Informationen über einen Zahlungsauftrag. Sie enthällt die Kolonnen Order-ID, Account-ID (welche auf die Tabelle Accounts verweist), Bank-To (welche beschreibt, an welche Bank die Zahlung geht), Account-To (welche auf die Tabelle Accounts verweist und den Empfänger der Zahlung angibt), Amount (den Betrag der Zahlung) und k_symbol (den Typ der Transaktion). Die Werte in der Spalte k_symbol sollen wieder übersetzt werden. Fehlende Werte sollen hier mit “unknown” ersetzt werden.
sample_n(orders, 5)# Rename column k_symbol
orders <- rename(orders, "characterization" = "k_symbol")
# Translate column characterization
orders$characterization[orders$characterization == "SIPO"] <- "household"
orders$characterization[orders$characterization == "UVER"] <- "loan"
orders$characterization[orders$characterization == "POJISTNE"] <- "insurance"
orders$characterization[orders$characterization == "LEASING"] <- "leasing"
orders$characterization[orders$characterization == " "] <- "unknown"
orders$characterization[orders$characterization == ""] <- "unknown"
orders$amount <- as.numeric(orders$amount)
sum(is.na(orders))[1] 0Auch hier gibt es keine fehlenden Werte.
Loans
sample_n(loans, 5)Die Tabelle Loans enthält Informationen über Darlehen der verschiedenen Accounts. Dabei stehen uns Informationen wie das Datum, die Höhe, die Dauer, der Betrag der zahlungen und den Status der Darlehen zur Verfügung. Auch hier soll wieder das Datumsformat geändert und der Status der Darlehen in einen besser lesbaren Wert umgewandelt werden. Die Informationen über die verschiedenen Status sind der Dokumentation des Datensatzes zu entnehmen.
loans$date <- as.Date(as.character(loans$date), format= "%y%m%d")
loans$payments <- as.numeric(loans$payments)
loans$amount <- as.numeric(loans$amount)
# Make column status human readable
loans$status[loans$status == "A"] <- "finished_payed"
loans$status[loans$status == "B"] <- "finished_not_payed"
loans$status[loans$status == "C"] <- "running_ok"
loans$status[loans$status == "D"] <- "running_in_debt"
sum(is.na(loans))[1] 0Auch hier gibt es keine fehlenden Werte.
Zusammenfügen der Dataframes
Als Nächstes fassen wir die Dataframes zu einem grossen Dataframe zusammen, damit wir später Modelle darauf trainieren können. Dabei müssen wir überprüfen, ob es sich bei den Verbindungen der verschiedenen Tabellen um n zu n Beziehungen handelt. Wir starten mit der Tabelle Clients und fügen immer mehr Tabellen hinzu.
Clients und Dispositions
print(paste("Anzahl Kunden in Clients:", dim(clients)[1]))[1] "Anzahl Kunden in Clients: 4650"print(paste("Anzahl Dispositions:", dim(dispositions)[1]))[1] "Anzahl Dispositions: 4500"Es gibt also weniger Dispositions als Clients. Aber gibt es Clients mit mehreren Dispositions?
dim(dispositions)[1] - length(unique(dispositions$client_id))[1] 0Nein, es gibt keine Clients mit mehreren Dispositionen. Wir können also die beiden Dataframes anhand eines Inner-Joins miteinander verbinden, verlieren dabei aber mehr als 600 Kunden. Diese Kunden sind für uns sowieso irrelevant, da sie keine Konten besitzen.
full <- inner_join(clients, dispositions, by = "client_id", suffix = c(".client", ".dispositions"))
print(paste("Anzahl Kunden mit Dispositionen:", dim(full)[1]))[1] "Anzahl Kunden mit Dispositionen: 3858"Es bleiben also 3858 Kunden.
Accounts
print(paste("Anzahl Accounts:", dim(accounts)[1]))[1] "Anzahl Accounts: 4500"Es gibt also gleich viele Accounts wie Dispositionen. Auch hier soll wieder überprüft werden, ob jeder Account genau einen Owner hat.
# Count the number of dispositions per client
acc_counts <- count(accounts, "client_id")
# Create a summary of the counts
summary <- table(acc_counts$n)
summary
4500
1 Jeder Account hat genau einen Owner. Das Dataframe Accounts kann also zu unserem grossen Dataframe hinzugefügt werden.
full <- inner_join(full, accounts, by = "account_id", suffix = c("", ".accounts"))
dim(full)[1][1] 3858Unser Dataframe hat immer noch eine Länge von 3858 Zeilen oder Kunden.
Loans
print(paste("Anzahl Loans:", dim(loans)[1]))[1] "Anzahl Loans: 682"Es gibt nur 682 Loans. Das bedeutet, dass nicht jeder Kunde ein Darlehen hat, was Sinn ergibt. Weiter soll noch überprüft werden, ob es Kunden gibt, welche mehrere Darlehen haben.
dim(loans)[1] - length(unique(loans$account_id))[1] 0Es gibt also keine Kunden, welche mehrere Darlehen bezogen haben. Die Loans sollen an das gesamte Dataframe mittels Left Join agehängt werden. So gibt es Kunden, welche keine Loans haben und die Variabeln den Wert NA haben. Bei diesen sollen die fehlenden numerischen Werte durch 0 ersetzt und der Status auf “no_loan” geändert werden. Das Datum des Loans entfernen wir.
full <- left_join(full, loans, by = "account_id", suffix = c("", ".loans"))
full$amount <- ifelse(is.na(full$amount), 0, full$amount)
full$duration <- ifelse(is.na(full$duration), 0, full$duration)
full$payments <- ifelse(is.na(full$payments), 0, full$payments)
full$status <- ifelse(is.na(full$status), "no_loan", full$status)
full$date.loans <- NULLCards
print(paste("Anzahl Cards:", dim(cards)[1]))[1] "Anzahl Cards: 747"length(unique(cards$disp_id))[1] 747Es gibt 747 Kunden mit Karten, kein Kunde hat mehrere Karten. Es macht wieder Sinn, dass nicht alle Kunden eine Karte habe. Der Kartentyp ist immer gleich.
Daher wird in Folge der Typ der Karte durch den boolschen Wert “has_card” ersetzt. Dies wird auch unsere Zielvariabel in den Modellen sein. Auch die Card-ID kann entfernt werden.
full <- left_join(full, cards, by = "disp_id", suffix = c("", ".cards"))has_card_function <- function(x) {
if (is.na(x)) {
return(FALSE)
} else {
return(TRUE)
}
}
full$has_card <- sapply(full[, "card_id"], has_card_function)
full <- full %>% select(-card_id, -type)Orders
print(paste("Anzahl Orders:", dim(orders)[1]))[1] "Anzahl Orders: 6471"length(unique(orders$account_id))[1] 3758Es gibt 6471 Orders für 3758 Kunden. Das bedeutet, dass es Kunden gibt, welche mehrere Orders haben. Diese Informationen müssen wir zu einer Row zusammenfassen.
Dabei haben wir uns dafür entschieden, die Variabeln account_to und amount nicht in den Gesamtdatensatz einfliessen zu lassen. Der amount ist bereits in den Transaktionen inbegriffen. An wen die Zahlungen gehen, sollte keinen Einfluss auf unser Modell haben.
Also bleiben uns noch die Variabeln “characterization” und “bank_to”. Zuerst schauen wir uns an, wie viele verschiedene Werte diese beiden Variabeln annehmen können.
unique(orders$characterization)[1] "household" "loan" "unknown" "insurance" "leasing" length(unique(orders$characterization))[1] 5unique(orders$bank_to) [1] "YZ" "ST" "QR" "WX" "CD" "AB" "UV" "GH" "IJ" "KL" "EF" "MN" "OP"length(unique(orders$bank_to))[1] 13Bei diesen beiden Variabeln gibt es nur 5 bzw. 13 verschiedene Ausprägungen. Wir können also diese Werte wie folgt an den grossen Datensatz anfügen:
Für jede Ausprägung der Spalte gibt es eine neue Kolonne. Diese Kolonne nimmt den Wert der Anzahl der Orders mit dieser “characterization” bzw. “bank_to” an.
characterizations <- orders %>%
group_by(account_id, characterization) %>%
count()
characterizations_wide <- characterizations %>%
spread(key = characterization, value = n)
bank_tos <- orders %>%
group_by(account_id, bank_to) %>%
count()
bank_tos_wide <- bank_tos %>%
spread(key = bank_to, value = n)
orders <- merge(characterizations_wide, bank_tos_wide, by = "account_id")
orders[is.na(orders)] <- 0full <- left_join(full, orders, by = "account_id")Die fehlenden Werte in diesen Kolonnen müssen jetzt noch mit 0 ersetzt werden. Der Einfachheit halber setzen wir diese Werte hardcoded.
full$household[is.na(full$household)] <- 0
full$insurance[is.na(full$insurance)] <- 0
full$leasing[is.na(full$leasing)] <- 0
full$loan[is.na(full$loan)] <- 0
full$unknown[is.na(full$unknown)] <- 0
full$AB[is.na(full$AB)] <- 0
full$CD[is.na(full$CD)] <- 0
full$EF[is.na(full$EF)] <- 0
full$GH[is.na(full$GH)] <- 0
full$IJ[is.na(full$IJ)] <- 0
full$KL[is.na(full$KL)] <- 0
full$MN[is.na(full$MN)] <- 0
full$OP[is.na(full$OP)] <- 0
full$QR[is.na(full$QR)] <- 0
full$ST[is.na(full$ST)] <- 0
full$UV[is.na(full$UV)] <- 0
full$WX[is.na(full$WX)] <- 0
full$YZ[is.na(full$YZ)] <- 0Districts
Jeder Kunde sowie jeder Account ist einem Gebiet zugewiesen. Zuerst überprüfen wir, ob es sich dabei immer um dasselbe Gebiet handelt.
sum(full$district_id != full$district_id.accounts)[1] 349349 Personen haben ihren Account also in einem anderen Distrikt, als sie zugewiesen sind. Wir müssen die District-Informationen für beide District-ID’s zuweisen. Dies machen wir wieder mit Left-Joins.
full <- left_join(full, districts, by = "district_id")
full <- left_join(full, districts, by = c("district_id.accounts"="district_id"), suffix = c("", ".accounts"))Zum Schluss können die verschiedenen ID’s entfernt werden, da sie irrelevant für das Modell sind und nicht mehr gebraucht werden. Einzig die Account-ID wird im Datensatz behalten, damit die Transaktionen hinzugefügt werden können.
full <- full %>% select(-client_id, -district_id, -disp_id, -district_id.accounts, -loan_id)Unser zusammengesetztes Dataframe sieht nun folgendermassen aus:
fullEr beinhaltet 3858 Kunden mit 59 verschiedenen Merkmalen.
Transactions
Nun müssen nur noch die Transaktionsdaten zum Dataframe hinzugefügt werden. Diese müssen aber anders zusammengefasst werden, da jeder Kunde viele Transaktionen haben kann. Die Transaktionen werden für Kreditkartenkäufer und Nicht-Käufer aggregiert, weshalb wir diese als Erstes anhand der Variable “has_card” trennen.
card_buyers <- full %>% filter(has_card == TRUE)
non_buyers <- full %>% filter(has_card == FALSE)
print(paste("Anzahl Käufer:", dim(card_buyers)[1]))[1] "Anzahl Käufer: 706"print(paste("Anzahl Nicht-Käufer:", dim(non_buyers)[1]))[1] "Anzahl Nicht-Käufer: 3152"Es gibt 706 Kreditkartenkäufer und 3152 Nicht-Käufer.
Aggregation der Transaktionen für Kreditkartenkäufer
Bei den Kreditkartenkäufern ist der Zeitpunkt des Kreditkartenkaufs gegeben. Da unser Modell Vorhersagen soll, ob ein Kunde eine Kredikarte kauft, haben die Monate unmittelbar vor dem Kaufzeitpunkt den grössten Einfluss. Wir erstellen also für jeden Kreditkartenkäufer ein Rollup-Fenster für die letzten zwölf Monate vor dem Kauf der Kreditkare, vor einem einmonatigen Lag Fenster unmittelbar vor dem Kaufdaum. Diesen Monat beachten wir nicht, da die Bearbeitung eines Kreditkartenkaufs etwa zwei bis vier Wochen dauern kann und sich der Kunde dementsprechend bereits vor dem Kaufdatum für eine Kreditkarte entschieden hat.
Als Erstes werden dafür die Transaktionen von Kunden herausgefiltert, welche eine Kreditkarte haben.
account_ids <- card_buyers$account_id
buyer_transactions <- transactions[transactions$account_id %in% account_ids,]Das Kreditkartenkaufdatum soll zu den Transaktionen hinzugefügt werden, damit diese für jeden Kunden einzeln gefiltert werden können.
buyer_transactions <- merge(buyer_transactions, full[, c("account_id", "issued")], by="account_id")Nun sollen Transaktionen so gefiltert werden, dass nur noch Transaktionen zwischen 13 Monaten und 1 Monat vor dem Anfang des Monats des Kreditkartenkaufes vorkommen.
filter_time_range <- function(df)
{
filtered_df <- df %>%
filter(date >= floor_date(issued %m-% months(13), "month") &
date <= (floor_date(issued %m-% months(1), "month") - days(1)))
return(filtered_df)
}
filtered_df <- filter_time_range(buyer_transactions)Es existieren oft Monate, bei denen ein Kunde keine Transaktionen gemacht hat. Dies liegt entweder daran, dass der Kunde nicht viele Transaktionen tätigte oder die Kreditkarte bereits im ersten Jahr gekauft hat. In diesen Monaten werden in Folge jeweils eine leere Transaktion eingefügt, welche die Balance der letzten Transaktion des Vormonats trägt.
impute_missing_months <- function(filtered_df)
{
filtered_df$month <- format(filtered_df$date, "%Y-%m")
rows_to_impute <- filtered_df %>% group_by(account_id) %>% filter(n_distinct(month) != 12)
rows_to_impute <- rows_to_impute[order(rows_to_impute$account_id, rows_to_impute$date), ]
account_ids <- unique(rows_to_impute$account_id)
print(paste(length(account_ids), "unvollständige Accounts gefunden."))
pb <- txtProgressBar(min = 0, max = length(account_ids), style = 3, width = 50, char = "=")
for (i in 1:length(account_ids))
{
user_transactions <- rows_to_impute[rows_to_impute$account_id == account_ids[i],]
# get all months the client should have a transaction in
months_target <- sapply(13:2, function(x) format(user_transactions$issued[1] %m-% months(x), "%Y-%m"))
# create dummy transaction in case first month is empty
new_transaction <- user_transactions[1,]
new_transaction$difference = 0
# use prev_balance in case the first element gets imputed
new_transaction$balance <- new_transaction$prev_balance
for (month_target in months_target)
{
new_transaction$date <- as.Date(paste0(month_target, "-01"))
new_transaction$month <- month_target
# get last transaction of current month from the current user's transactions
last_transaction <- tail(user_transactions %>% filter(month == month_target), n=1)
if(nrow(last_transaction) == 0)
{
# impute empty transaction in missing month
filtered_df <- rbind(filtered_df, new_transaction)
}
else
{
new_transaction$balance <- last_transaction$balance
new_transaction$prev_balance <- new_transaction$balance
}
}
setTxtProgressBar(pb, i)
}
close(pb)
return(filtered_df)
}
filtered_df <- impute_missing_months(filtered_df)[1] "169 unvollständige Accounts gefunden."
|
| | 0%
|
| | 1%
|
|= | 1%
|
|= | 2%
|
|= | 3%
|
|== | 4%
|
|== | 5%
|
|=== | 5%
|
|=== | 6%
|
|=== | 7%
|
|==== | 7%
|
|==== | 8%
|
|==== | 9%
|
|===== | 9%
|
|===== | 10%
|
|===== | 11%
|
|====== | 11%
|
|====== | 12%
|
|======= | 13%
|
|======= | 14%
|
|======= | 15%
|
|======== | 15%
|
|======== | 16%
|
|======== | 17%
|
|========= | 17%
|
|========= | 18%
|
|========= | 19%
|
|========== | 20%
|
|========== | 21%
|
|=========== | 21%
|
|=========== | 22%
|
|============ | 23%
|
|============ | 24%
|
|============ | 25%
|
|============= | 25%
|
|============= | 26%
|
|============= | 27%
|
|============== | 27%
|
|============== | 28%
|
|============== | 29%
|
|=============== | 30%
|
|=============== | 31%
|
|================ | 31%
|
|================ | 32%
|
|================ | 33%
|
|================= | 33%
|
|================= | 34%
|
|================= | 35%
|
|================== | 36%
|
|================== | 37%
|
|=================== | 37%
|
|=================== | 38%
|
|==================== | 39%
|
|==================== | 40%
|
|==================== | 41%
|
|===================== | 41%
|
|===================== | 42%
|
|===================== | 43%
|
|====================== | 43%
|
|====================== | 44%
|
|====================== | 45%
|
|======================= | 46%
|
|======================= | 47%
|
|======================== | 47%
|
|======================== | 48%
|
|======================== | 49%
|
|========================= | 49%
|
|========================= | 50%
|
|========================= | 51%
|
|========================== | 51%
|
|========================== | 52%
|
|========================== | 53%
|
|=========================== | 53%
|
|=========================== | 54%
|
|============================ | 55%
|
|============================ | 56%
|
|============================ | 57%
|
|============================= | 57%
|
|============================= | 58%
|
|============================= | 59%
|
|============================== | 59%
|
|============================== | 60%
|
|============================== | 61%
|
|=============================== | 62%
|
|=============================== | 63%
|
|================================ | 63%
|
|================================ | 64%
|
|================================= | 65%
|
|================================= | 66%
|
|================================= | 67%
|
|================================== | 67%
|
|================================== | 68%
|
|================================== | 69%
|
|=================================== | 69%
|
|=================================== | 70%
|
|==================================== | 71%
|
|==================================== | 72%
|
|==================================== | 73%
|
|===================================== | 73%
|
|===================================== | 74%
|
|===================================== | 75%
|
|====================================== | 75%
|
|====================================== | 76%
|
|====================================== | 77%
|
|======================================= | 78%
|
|======================================= | 79%
|
|======================================== | 79%
|
|======================================== | 80%
|
|========================================= | 81%
|
|========================================= | 82%
|
|========================================= | 83%
|
|========================================== | 83%
|
|========================================== | 84%
|
|========================================== | 85%
|
|=========================================== | 85%
|
|=========================================== | 86%
|
|=========================================== | 87%
|
|============================================ | 88%
|
|============================================ | 89%
|
|============================================= | 89%
|
|============================================= | 90%
|
|============================================= | 91%
|
|============================================== | 91%
|
|============================================== | 92%
|
|============================================== | 93%
|
|=============================================== | 93%
|
|=============================================== | 94%
|
|=============================================== | 95%
|
|================================================ | 95%
|
|================================================ | 96%
|
|================================================= | 97%
|
|================================================= | 98%
|
|================================================= | 99%
|
|==================================================| 99%
|
|==================================================| 100%Bei 169 Kreditkartenkäufer ist kein komplettes 12-Monats-Rollup-Fenster vorhanden. Bei allen wurden die fehlenden Monate imputiert.
Nun werden diese Daten aggregiert. Es wird eine Gruppierung anhand der “account_id” und des Monats gemacht. Die Werte “difference” und “balance” auf verschiedene Arten aggregiert: Auf beiden Werten erfassen wir das Minimum, das Maximum, den Durchschnitt, den Median und die Standardabweichung. Bei “balance” erfassen wir den ersten und den letzten Wert des Monats und bei “difference” die Anzahl positive und negative Differenzen.
get_summary_df <- function(filtered_df)
{
summary_df <- filtered_df %>%
group_by(account_id, month) %>%
summarise(
max_difference = max(difference),
min_difference = min(difference),
max_balance = max(balance),
min_balance = min(balance),
initial_balance = first(balance),
end_balance = last(balance),
mean_balance = mean(balance),
median_balance = median(balance),
std_balance = sd(balance),
mean_difference = mean(difference),
median_difference = median(difference),
std_difference = sd(difference),
count_positive_difference = sum(difference > 0),
count_negative_difference = sum(difference < 0)
)
summary_df <- summary_df %>% arrange(account_id)
return(summary_df)
}
summary_df <- get_summary_df(filtered_df)Diese Zusammenfassung sieht nun für jeden Kunden folgendermassen aus:
summary_df %>% filter(account_id == 7)Für jeden Kunden gibt es nun für jeden Monat vor dem Kreditkartenkauf eine Zeile mit den aggregierten Daten des Monats. Wir überprüfen noch kurz, ob auch wirklich für jeden Kunden zwölf Monate vorhanden sind.
get_incomplete_buyers <- function(summary_df)
{
# Kontrolle, ob für jeden account_id 12 monate vorhanden sind
month_counts <- summary_df %>%
group_by(account_id) %>%
summarise(month_count = n_distinct(month))
# Prüfe, ob jedes account_id 12 Monate hat
month_counts <- month_counts %>% filter(month_count != 12)
return(month_counts)
}
month_counts <- get_incomplete_buyers(summary_df)
print(paste("Anzahl Kunden mit weniger als 12 Monaten:", dim(month_counts)[1]))[1] "Anzahl Kunden mit weniger als 12 Monaten: 0"Jeder Kreditkartenkäufer hat also wirklich 12 Monate. Als nächstes wollen wir diese zwölf Rows pro Kunde zu einer Row umwandeln. Dafür nummerieren wir zunächst die Monate pro Kreditkartenkäufer von 1 bis 12 durch. Dabei ist der Monat 12 der letzte Monat vor dem Kaufdatum (abgesehen vom Lag-Monat).
set_month_ids <- function(summary_df)
{
# Sortieren nach account_id und Monat
summary_df <- summary_df[order(summary_df$account_id, rev(summary_df$month)),]
# Hinzufügen der Monatsnummer
summary_df$group_id <- ave(seq_along(summary_df$account_id), summary_df$account_id, FUN = function(x) {x})
summary_df$month_number <- 12
for (i in 2:nrow(summary_df)) {
if (summary_df$account_id[i] != summary_df$account_id[i-1]) {
summary_df$month_number[i] <- 12
} else {
summary_df$month_number[i] <- summary_df$month_number[i-1] - 1
}
}
# Entferne die Spalte group_id
summary_df$group_id <- NULL
summary_df$month <- NULL
return(summary_df)
}
summary_df <- set_month_ids(summary_df)Als nächstes brauchen wir pivot_wider. So haben wir jede Kennzahl zwölf mal als Kolonne, jedes Mal mit der vorher erstellten Monatsnummer als Suffix.
pivot_by_month <- function(summary_df)
{
summary_df_wide <- summary_df %>%
group_by(account_id) %>%
pivot_wider(names_from = month_number,
values_from = c(max_difference, min_difference, max_balance, min_balance, initial_balance, end_balance, mean_balance, median_balance, std_balance, median_balance, std_balance, mean_difference, median_difference, std_difference, count_positive_difference, count_negative_difference))
return(summary_df_wide)
}
summary_df_wide <- pivot_by_month(summary_df)Das daraus resultierende Dataframe sieht so aus:
summary_df_wideFür jeden Kreditkartenkäufer gibt es jetzt eine Row mit 169 verschiedenen Merkmalen: Die account_id und die 14 aggregierten Informationen über die Transaktiionen für alle 12 Monate.
Dieses Dataframe fügen wir noch zu den anderen Informationen der Kreditkartenkäufer hinzu.
summary_df_buyers <- merge(summary_df_wide, subset(card_buyers), by = "account_id")Aggregation der Transaktionen für Nicht-Käufer
Für Nicht-Käufer ist kein Datum des Kreditkartenkaufs gegeben, da sie ja keine gekauft haben. Es stellt sich also die Frage, von welchem Datum aus man das Rollup-Fenster erstellt.
Wir haben uns dazu entschieden, für jeden Käufer einen möglichst ähnlichen Nicht-Käufer zu finden. Dafür werden Nichtkäufer mit gleichem Geschlecht und gleicher Region gesucht. Das Kaufdatum des ähnlichen Käufers wird dann auf den Nicht-Käufer übertragen. Ein weiteres Kriterium ist, dass der Nicht-Käufer mindestens eine Transaktion in dem Rollup-Fenster haben muss. Jeder Nicht-Käufer wird maximal einmal als Match genommen, damit keine doppelten Kunden im Datensatz vorkommen.
Durch dieses Vorgehen benutzen wir nur einen Teil der Nicht-Käufer, haben aber direkte, ähnliche Vergleichspersonen, welche im gleichen Zeitraum keine Kreditkarten gekauft haben. Ausserdem bringt das Vorgehen auch den Vorteil, dass die Daten für das Modell automatisch Balanced sind. Dies macht das Trainieren des Modells einfacher, da es dazu beiträgt, dass das Modell nicht Biased gegenüber den Nicht-Käufern wird.
pb <- txtProgressBar(min = 0, max = nrow(card_buyers), style = 3, width = 50, char = "=")
|
| | 0%# Erstelle ein leeres DataFrame "similar_non_buyers"
similar_non_buyers <- data.frame()
# Iteriere über jeden Kunden im DataFrame "buyers"
for (i in 1:nrow(card_buyers))
{
# Wähle den aktuellen Kunden aus dem DataFrame "buyers"
current_buyer <- card_buyers[i, ]
similar_non_buyers_temp <- non_buyers %>% filter(gender == current_buyer$gender &
region == current_buyer$region)
# damit nicht der gleiche non_buyer doppelt verwendet wird
similar_non_buyers_temp <- similar_non_buyers_temp[!similar_non_buyers_temp$account_id %in% similar_non_buyers$account_id,]
# filtere non-buyers heraus, welche keine Transaktionen im relevanten Zeitraum vor issued haben
similar_non_buyers_temp$issued <- current_buyer$issued
non_buyer_transactions <- merge(transactions, similar_non_buyers_temp[, c("account_id", "issued")], by='account_id')
non_buyer_filtered <- filter_time_range(non_buyer_transactions)
non_buyer_ids <- unique(non_buyer_filtered$account_id)
similar_non_buyers_temp <- similar_non_buyers_temp[similar_non_buyers_temp$account_id %in% non_buyer_ids,]
if(nrow(similar_non_buyers_temp) > 0)
{
# Wähle den am besten passenden Kunden aus "similar_non_buyers_temp" aus
best_match_index <- which.min(abs(similar_non_buyers_temp$age - current_buyer$age))
best_match <- similar_non_buyers_temp[best_match_index, ]
similar_non_buyers <- rbind(similar_non_buyers, copy(best_match))
setTxtProgressBar(pb, i)
}
else
{
print(paste0(current_buyer$account_id, ": no non-buyer found"))
}
}
|
| | 1%
|
|= | 1%
|
|= | 2%
|
|= | 3%
|
|== | 3%
|
|== | 4%
|
|== | 5%
|
|=== | 5%
|
|=== | 6%
|
|=== | 7%
|
|==== | 7%
|
|==== | 8%
|
|==== | 9%
|
|===== | 9%
|
|===== | 10%
|
|===== | 11%
|
|====== | 11%
|
|====== | 12%
|
|====== | 13%
|
|======= | 13%
|
|======= | 14%
|
|======= | 15%
|
|======== | 15%
|
|======== | 16%
|
|======== | 17%
|
|========= | 17%
|
|========= | 18%
|
|========= | 19%
|
|========== | 19%
|
|========== | 20%
|
|========== | 21%
|
|=========== | 21%
|
|=========== | 22%
|
|=========== | 23%
|
|============ | 23%
|
|============ | 24%
|
|============ | 25%
|
|============= | 25%
|
|============= | 26%
|
|============= | 27%
|
|============== | 27%
|
|============== | 28%
|
|============== | 29%
|
|=============== | 29%
|
|=============== | 30%
|
|=============== | 31%
|
|================ | 31%
|
|================ | 32%
|
|================ | 33%
|
|================= | 33%
|
|================= | 34%
|
|================= | 35%
|
|================== | 35%
|
|================== | 36%
|
|================== | 37%
|
|=================== | 37%
|
|=================== | 38%
|
|=================== | 39%
|
|==================== | 39%
|
|==================== | 40%
|
|==================== | 41%
|
|===================== | 41%
|
|===================== | 42%
|
|===================== | 43%
|
|====================== | 43%
|
|====================== | 44%
|
|====================== | 45%
|
|======================= | 45%
|
|======================= | 46%
|
|======================= | 47%
|
|======================== | 47%
|
|======================== | 48%
|
|======================== | 49%
|
|========================= | 49%
|
|========================= | 50%
|
|========================= | 51%
|
|========================== | 51%
|
|========================== | 52%
|
|========================== | 53%
|
|=========================== | 53%
|
|=========================== | 54%
|
|=========================== | 55%
|
|============================ | 55%
|
|============================ | 56%
|
|============================ | 57%
|
|============================= | 57%
|
|============================= | 58%
|
|============================= | 59%
|
|============================== | 59%
|
|============================== | 60%
|
|============================== | 61%
|
|=============================== | 61%
|
|=============================== | 62%
|
|=============================== | 63%
|
|================================ | 63%
|
|================================ | 64%
|
|================================ | 65%
|
|================================= | 65%
|
|================================= | 66%
|
|================================= | 67%
|
|================================== | 67%
|
|================================== | 68%
|
|================================== | 69%
|
|=================================== | 69%
|
|=================================== | 70%
|
|=================================== | 71%
|
|==================================== | 71%
|
|==================================== | 72%
|
|==================================== | 73%
|
|===================================== | 73%
|
|===================================== | 74%
|
|===================================== | 75%
|
|====================================== | 75%
|
|====================================== | 76%
|
|====================================== | 77%
|
|======================================= | 77%
|
|======================================= | 78%
|
|======================================= | 79%
|
|======================================== | 79%
|
|======================================== | 80%
|
|======================================== | 81%
|
|========================================= | 81%
|
|========================================= | 82%
|
|========================================= | 83%
|
|========================================== | 83%
|
|========================================== | 84%
|
|========================================== | 85%
|
|=========================================== | 85%
|
|=========================================== | 86%
|
|=========================================== | 87%
|
|============================================ | 87%
|
|============================================ | 88%
|
|============================================ | 89%
|
|============================================= | 89%
|
|============================================= | 90%
|
|============================================= | 91%
|
|============================================== | 91%
|
|============================================== | 92%
|
|============================================== | 93%
|
|=============================================== | 93%
|
|=============================================== | 94%
|
|=============================================== | 95%
|
|================================================ | 95%
|
|================================================ | 96%
|
|================================================ | 97%
|
|================================================= | 97%
|
|================================================= | 98%
|
|================================================= | 99%
|
|==================================================| 99%
|
|==================================================| 100%close(pb)print(paste("Anzahl Buyers:", length(unique(card_buyers$account_id))))[1] "Anzahl Buyers: 706"print(paste("Anzahl gefundene Matches:", length(unique(similar_non_buyers$account_id))))[1] "Anzahl gefundene Matches: 706"Wie hier sichtbar wird, konnte zu allen Kartenkäufer ein passender Nicht-Käufer gefunden werden. Auf diesen sollen die Transaktionsdaten jetzt gleich wie bei den Kreditkartenkäufern aggregiert werden. Als erstes werden die Transaktionen wieder auf das gegebene Rollup-Fenster gefiltert.
# find missings
non_buyer_transactions <- merge(transactions, similar_non_buyers[, c("account_id", "issued")], by='account_id')
filtered_df <- filter_time_range(non_buyer_transactions)Als nächstes werden wieder Aggregationen für jeden Monat erstellt und fehlende Monate analog zu den Kreditkartenkäufern imputiert.
filtered_df <- impute_missing_months(filtered_df)[1] "168 unvollständige Accounts gefunden."
|
| | 0%
|
| | 1%
|
|= | 1%
|
|= | 2%
|
|= | 3%
|
|== | 4%
|
|== | 5%
|
|=== | 5%
|
|=== | 6%
|
|=== | 7%
|
|==== | 7%
|
|==== | 8%
|
|==== | 9%
|
|===== | 10%
|
|===== | 11%
|
|====== | 11%
|
|====== | 12%
|
|======= | 13%
|
|======= | 14%
|
|======= | 15%
|
|======== | 15%
|
|======== | 16%
|
|======== | 17%
|
|========= | 17%
|
|========= | 18%
|
|========== | 19%
|
|========== | 20%
|
|========== | 21%
|
|=========== | 21%
|
|=========== | 22%
|
|=========== | 23%
|
|============ | 23%
|
|============ | 24%
|
|============ | 25%
|
|============= | 26%
|
|============= | 27%
|
|============== | 27%
|
|============== | 28%
|
|============== | 29%
|
|=============== | 29%
|
|=============== | 30%
|
|=============== | 31%
|
|================ | 32%
|
|================ | 33%
|
|================= | 33%
|
|================= | 34%
|
|================= | 35%
|
|================== | 35%
|
|================== | 36%
|
|================== | 37%
|
|=================== | 38%
|
|=================== | 39%
|
|==================== | 39%
|
|==================== | 40%
|
|===================== | 41%
|
|===================== | 42%
|
|===================== | 43%
|
|====================== | 43%
|
|====================== | 44%
|
|====================== | 45%
|
|======================= | 45%
|
|======================= | 46%
|
|======================== | 47%
|
|======================== | 48%
|
|======================== | 49%
|
|========================= | 49%
|
|========================= | 50%
|
|========================= | 51%
|
|========================== | 51%
|
|========================== | 52%
|
|========================== | 53%
|
|=========================== | 54%
|
|=========================== | 55%
|
|============================ | 55%
|
|============================ | 56%
|
|============================ | 57%
|
|============================= | 57%
|
|============================= | 58%
|
|============================= | 59%
|
|============================== | 60%
|
|============================== | 61%
|
|=============================== | 61%
|
|=============================== | 62%
|
|================================ | 63%
|
|================================ | 64%
|
|================================ | 65%
|
|================================= | 65%
|
|================================= | 66%
|
|================================= | 67%
|
|================================== | 67%
|
|================================== | 68%
|
|=================================== | 69%
|
|=================================== | 70%
|
|=================================== | 71%
|
|==================================== | 71%
|
|==================================== | 72%
|
|==================================== | 73%
|
|===================================== | 73%
|
|===================================== | 74%
|
|====================================== | 75%
|
|====================================== | 76%
|
|====================================== | 77%
|
|======================================= | 77%
|
|======================================= | 78%
|
|======================================= | 79%
|
|======================================== | 79%
|
|======================================== | 80%
|
|======================================== | 81%
|
|========================================= | 82%
|
|========================================= | 83%
|
|========================================== | 83%
|
|========================================== | 84%
|
|========================================== | 85%
|
|=========================================== | 85%
|
|=========================================== | 86%
|
|=========================================== | 87%
|
|============================================ | 88%
|
|============================================ | 89%
|
|============================================= | 89%
|
|============================================= | 90%
|
|============================================== | 91%
|
|============================================== | 92%
|
|============================================== | 93%
|
|=============================================== | 93%
|
|=============================================== | 94%
|
|=============================================== | 95%
|
|================================================ | 95%
|
|================================================ | 96%
|
|================================================= | 97%
|
|================================================= | 98%
|
|================================================= | 99%
|
|==================================================| 99%
|
|==================================================| 100%summary_df_non_buyers <- get_summary_df(filtered_df)Auch hier haben 168 Kunden kein vollständiges Rollup-Fenster. Wir überprüfen wieder, ob für jeden Kunden alle 12 Monate vorhanden sind.
month_counts <- get_incomplete_buyers(summary_df_non_buyers)
print(paste("Anzahl Kunden mit weniger als 12 Monaten:", dim(month_counts)[1]))[1] "Anzahl Kunden mit weniger als 12 Monaten: 0"Die Imputation hat funktioniert, es gibt keine Kunden mit weniger als 12 Monaten. Nun werden die Daten wieder auf eine Row ausgeweitet und mit den anderen Informationen der Kunden zusammengefügt.
summary_df_non_buyers <- set_month_ids(summary_df_non_buyers)
summary_df_wide <- pivot_by_month(summary_df_non_buyers)
summary_df_non_buyers <- merge(summary_df_wide, similar_non_buyers, by = "account_id")Zum Schluss werden die Käufer und die Nicht-Käufer in einem Datensatz kombiniert. Die Account-ID kann noch entfernt werden.
final_df <- rbind(summary_df_buyers, summary_df_non_buyers)
final_df$account_id <- NULLAusserdem scheinen einige Variabeln als Faktoren im Datensatz zu sein, welche eigentlich numerisch wären.
final_df$unemployment_rate_95 <- as.numeric(final_df$unemployment_rate_95)Warnung: NAs introduced by coercionfinal_df$unemployment_rate_95.accounts <- as.numeric(final_df$unemployment_rate_95.accounts)Warnung: NAs introduced by coercionfinal_df$crimes_95 <- as.numeric(final_df$crimes_95)Warnung: NAs introduced by coercionfinal_df$crimes_95.accounts <- as.numeric(final_df$crimes_95.accounts)Warnung: NAs introduced by coercionBei den berechneten Standardabweichung kommt es auch zu NA-Werten, da es Monate mit nur einer Transaktion gibt und daraus eine Null-Divison entsteht. Diese fehlenden Werte werden durch 0 ersetzt.
std_cols <- colnames(final_df %>% select(starts_with("std")))
final_df[,std_cols] <- final_df[,std_cols] %>% replace(is.na(.), 0)Unser finales Dataframe sieht wie folgt aus:
final_dfDer Datensatz enthält 1412 Kunden mit 226 verschiedenen Variabeln. Die Hälfte der Kunden sind Kreditkartenkäufer. Die Zielvariabel für spätere Modelle ist “has_card”.
EDA
Nun wollen wir unser Dataframe noch ein wenig genauer unter die Luppe nehmen.
Anzahl Kreditkarten-Käufer und Nicht-Käufer
ggplot(data = final_df, aes(x = has_card)) +
geom_bar(aes(y = after_stat(count)), stat = "count", fill = "steelblue") +
labs(x = "Ist Käufer", y = "Anzahl", title = "Anzahl Kreditkarten-Käufer und Nicht-Käufer")
Da wir für jeden Kreditkartenkäufer genau einen Käufer suchen, ist der Datensatz ausgeglichen: Es hat gleiche viele Nicht-Käufer wie Käufer.
Verteilung der Kaufdaten
ggplot(final_df, aes(x = issued, fill = factor(has_card))) +
geom_density(alpha = 0.5) +
labs(x = "Kaufdatum", y = "Dichte", fill = "Has Card", title = "Verteilung der Kaufdaten") +
scale_x_date(limits = range(final_df$issued))
Dieses Diagramm zeigt die Verteilung der Kaufdaten der Kunden. Da das Kaufdatum des Nicht-Käufers auf das des Käufers gesetzt wird, sind die Verteilungen der beiden Klassen hier deckungsgleich. In den Anfangsjahren des Datensatzes gibt es noch sehr wenige Kreditkartenkäufe, die Tendenz ist jedoch steigend. Ab 1996 erleben die Kreditkartenkäufe einen steilen Aufschwung, welcher Mitte 1998 zu seinem Höhepunkt kommt. Danach werden wieder weniger Käufe getätigt.
Entwicklung der Vermögen
Als nächstes wollen wir das Vermögen (balance) der Kunden anschauen. Wir beobachten, ob sich das Vermögen von Kunden und nicht Kunden bezüglich Höhe und Entwicklung unterscheidet.
averages_true <- colMeans(final_df[final_df$has_card == TRUE,
c("mean_balance_1", "mean_balance_2", "mean_balance_3",
"mean_balance_4", "mean_balance_5", "mean_balance_6",
"mean_balance_7", "mean_balance_8", "mean_balance_9",
"mean_balance_10", "mean_balance_11", "mean_balance_12")])
averages_false <- colMeans(final_df[final_df$has_card == FALSE,
c("mean_balance_1", "mean_balance_2", "mean_balance_3",
"mean_balance_4", "mean_balance_5", "mean_balance_6",
"mean_balance_7", "mean_balance_8", "mean_balance_9",
"mean_balance_10", "mean_balance_11", "mean_balance_12")])
ggplot() +
geom_line(aes(x = 1:12, y = averages_true, color = "Käufer")) +
geom_line(aes(x = 1:12, y = averages_false, color = "Nicht-Käufer")) +
labs(x = "Monat", y = "Durchschnittliches Vermögen", title = "Vermögensentwicklung") +
scale_color_manual(name = "Kunden", values = c("Käufer" = "steelblue", "Nicht-Käufer" = "red")) +
scale_x_continuous(limits = c(1, 12)) +
scale_y_continuous(limits = c(0, NA)) +
theme(legend.position = "right")
Kreditkartenkäufer haben im Schnitt ein höheres Vermögen als Nicht-Käufer. Das Vermögen aller Kunden steigt tendenziell, wobei das der Käufer steiler als das der Nicht-Käufer steigt. Ab dem siebten Monat scheint aber auch diese Vermögenssteigerung abzuflachen.
Anzahl Transaktionen
Als nächstes wollen wir untersuchen, ob sich Kreditkartenkäufer und Nicht-Käufer durch die Anzahl getätigter Transaktionen unterscheiden. Dafür schauen wir die durchschnittliche Anzahl Transaktionen für beide Klassen an.
avg_sum_negative_true <- mean(rowSums(final_df[final_df$has_card == TRUE, grep("count_negative_difference", colnames(final_df))]))
avg_sum_negative_false <- mean(rowSums(final_df[final_df$has_card == FALSE, grep("count_negative_difference", colnames(final_df))]))
avg_sum_positive_true <- mean(rowSums(final_df[final_df$has_card == TRUE, grep("count_positive_difference", colnames(final_df))]))
avg_sum_positive_false <- mean(rowSums(final_df[final_df$has_card == FALSE, grep("count_positive_difference", colnames(final_df))]))
avg_sum_both_true = avg_sum_negative_true + avg_sum_positive_true
avg_sum_both_false = avg_sum_negative_false + avg_sum_positive_false
ggplot() +
geom_bar(aes(x = c("Käufer", "Nicht-Käufer"), y = c(avg_sum_both_true, avg_sum_both_false)), stat = "identity", fill = c("steelblue", "red")) +
labs(x = "", y = "Durchschnittliche Anzahl Transaktionen", title = "Durchschnittliche Anzahl Transaktionen im ganzen Rollup-Fenster")
Kreditkartenkäufer haben also im Schnitt mehr Transaktionen getätigt als Nicht-Käufer im Rollup-Fenster. Doch wie Verhält es sich, wenn wir Anzahl positive und Anzahl negative Transaktionen separat betrachten?
ggplot() +
geom_bar(aes(x = c("Käufer Ausgaben", "Nicht-Käufer Ausgaben", "Käufer Einnahmen", "Nicht-Käufer Einnahmen"), y = c(avg_sum_negative_true, avg_sum_negative_false, avg_sum_positive_true, avg_sum_positive_false)), stat = "identity", fill = c("steelblue", "red", "steelblue", "red")) +
labs(x = "", y = "Durchschnittliche Anzahl Transaktionen", title = "Durchschnittliche Anzahl Transaktionen im ganzen Rollup-Fenster")
Beide Klassen haben mehr positive Transaktionen als negative, wobei Käufer bei positiven sowie bei negativen durchschnittlich mehr haben. Bei den Einnahmen ist der Unterschied ein wenig höher als bei den Ausgaben.
Darlehen
Hier soll untersucht werden, ob Käufer mehr Darlehen bei der Bank aufnehmen als Nicht-Käufer.
final_dfcard_buyers_with_loan <- final_df[final_df$has_card & final_df$status != "no_loan",]
non_buyers_with_loan <- final_df[!final_df$has_card & final_df$status != "no_loan",]
card_buyers_with_loan_count <- length(card_buyers_with_loan$has_card)
non_buyers_with_loan_count <- length(non_buyers_with_loan$has_card)
ggplot() +
geom_bar(aes(x = c("Käufer", "Nicht-Käufer"), y = c(card_buyers_with_loan_count, non_buyers_with_loan_count)), stat = "identity", fill = c("steelblue", "red")) +
labs(x = "", y = "Anzahl", title = "Anzahl Kunden mit Darlehen")
Fast doppelt so viele Käufer wie Nicht-Käufer haben ein Darlehen aufgenommen.
Modelle
Als nächstes wollen wir Modelle trainieren, welche Anhand der Merkmale der Kunden vorhersagen sollen, ob ein Kunde ein Käufer ist oder nicht. Dieses Modell soll dann gebraucht werden, um zu erkennen, welche bestehenden Kunden ohne Kreditkarte am ehesten eine kaufen würden.
Funktionen zur Evaluierung von Modellen
Damit die Evaluierung von Modellen nicht redundanten Code enthält, wird hier versucht, Funktionen zu erstellen, welche bei verschiedenen Modellen gebraucht werden können.
Train-Test-Split
Als Vorbereitung für die Modelle müssen wir unsere Daten zu Trainings- und Testdaten unterteilen. Dafür erstellen wir eine Funktion, welche auf verschiedenen Varianten des Datensatz gebraucht werden kann.
split_data <- function(df, test_size = 0.2) {
set.seed(27)
df <- df[order(df$issued, decreasing = FALSE), ]
# Get number of rows in the dataframe
n_rows <- nrow(df)
# Calculate the number of rows in the test set (20% of the total number of rows)
n_test_rows <- floor(n_rows * 0.2)
df$issued <- NULL
# Create the train and test sets
train <- head(df, n_rows - n_test_rows)
test <- tail(df, n_test_rows)
#split <- createDataPartition(df$has_card, p = 1 - test_size, list = FALSE)
# train <- df[split, ]
#test <- df[-split, ]
# create cv folds
train_sets <- c()
val_sets <- c()
set.seed(27)
cv_folds <- vfold_cv(train, v = 10)
# Iteriere über alle Folds
for (i in 1:nrow(cv_folds))
{
# Wähle den aktuellen Trainings- und Validierungsdatensatz aus
train_set <- cv_folds$splits[[i]] %>% analysis()
val_set <- cv_folds$splits[[i]] %>% assessment()
# Speichere den aktuellen Trainings- und Validierungsdatensatz in den Listen
train_sets[[i]] <- train_set
val_sets[[i]] <- val_set
}
return(list(train = train, test = test, cv_folds = cv_folds, train_sets = train_sets, val_sets = val_sets))
}Metriken
Damit wir die verschiedenen Modelle besser evaluieren können, müssen wir die gleichen Kennzahlen und Auswertungen pro Modell machen. Zu diesem Zweck definieren wir einige Funktionen, damit wir weniger redundanten Code haben und unsere Ergebnisse in einem einheitliche, vergleichbaren Format daherkommen.
Dafür erstellen wir eine Funktion, die die Genauigkeit (Accuracy), Cohen’s Kappa, Matthews Korrelation, Präzision (Precision), Erinnerung (Recall) und den F1-Score für eine Reihe von Vorhersagen und deren entsprechenden wahren Werte berechnet.
Was bedeuten diese Kennzahlen genau?
Accuracy (Genauigkeit): Die Accuracy ist der Prozentsatz der Vorhersagen, die mit den tatsächlichen Werten übereinstimmen. Sie wird berechnet als Anzahl der korrekten Vorhersagen geteilt durch die Gesamtzahl der Vorhersagen.
Cohen’s Kappa (Cohen’s Kappa): Cohen’s Kappa ist eine Messgröße für die Qualität von binären Klassifikationen. Es wird verwendet, um die Übereinstimmung zwischen zwei Klassifikatoren zu messen, indem es die Übereinstimmung über der erwarteten Übereinstimmung durch Zufall berechnet. Ein Kappa-Wert von 1 bedeutet perfekte Übereinstimmung, ein Wert von 0 bedeutet keine Übereinstimmung, die besser ist als Zufall, und ein Wert von -1 bedeutet komplett falsche Klassifikationen.
Matthews correlation coefficient (Matthews Korrelation): Der Matthews Korrelation Coefficient (MCC) ist eine Messgröße für die Qualität von binären Klassifikationen. Er reicht von -1 bis 1, wobei ein Wert von 1 perfekte Klassifikation bedeutet, ein Wert von 0 eine Klassifikation, die nicht besser als Zufall ist, und ein Wert von -1 eine komplett falsche Klassifikation bedeutet.
Precision (Präzision): Die Präzision ist der Prozentsatz der Vorhersagen, die tatsächlich korrekt waren, unter der Annahme, dass alle Vorhersagen korrekt sind. Sie wird berechnet als Anzahl der korrekten Vorhersagen für die positive Klasse geteilt durch die Gesamtzahl der Vorhersagen für die positive Klasse.
Recall (Erinnerung): Der Recall ist der Prozentsatz der tatsächlich positiven Werte, die korrekt vorhergesagt wurden. Er wird berechnet als Anzahl der korrekten Vorhersagen für die positive Klasse geteilt durch die Gesamtzahl der tatsächlich positiven Werte.
F1 score (F1-Wert): Der F1-Wert ist ein Maß für die Qualität von binären Klassifikationen, das die Harmoniesche Mischung von Präzision und Recall darstellt. Es wird berechnet als der Harmoniesche Mittelwert von Präzision und Recall. Ein hoher F1-Wert bedeutet, dass sowohl Präzision als auch Recall hoch sind.
get_metrics <- function(predictions, true_values, model_name) {
# Calculate accuracy
accuracy <- sum(predictions == true_values) / length(predictions)
# Calculate Cohen's kappa
n <- length(predictions)
observed_agreement <- sum(predictions == true_values)
expected_agreement <- sum(predictions == true_values) / n
kappa <- (observed_agreement - expected_agreement) / (n - expected_agreement)
# Calculate Matthews correlation coefficient
confusion_matrix <- table(predictions, true_values)
tp <- confusion_matrix[2,2]
tn <- confusion_matrix[1,1]
fp <- confusion_matrix[2,1]
fn <- confusion_matrix[1,2]
matthews <- (tp * tn - fp * fn) / sqrt((tp + fp) * (tp + fn) * (tn + fp) * (tn + fn))
# Calculate precision and recall
precision <- confusion_matrix[2,2] / sum(confusion_matrix[2,])
recall <- confusion_matrix[2,2] / sum(confusion_matrix[,2])
# Calculate F1 score
f1 <- 2 * (precision * recall) / (precision + recall)
# Create a data frame of the metrics
metrics <- data.frame(model = model_name, accuracy = accuracy, kappa = kappa, matthews = matthews,
precision = precision, recall = recall, f1 = f1)
# Return the data frame
return(metrics)
}Konfusionsmatrix mit Plot
Diese Funktion erstellt eine Konfusionsmatrix und gibt sie als Plot zurück.
Eine Konfusionsmatrix ist ein wichtiges Werkzeug zur Evaluation von Klassifikationsmodellen. Sie zeigt an, wie gut das Modell in der Lage ist, die verschiedenen Klassen richtig zu identifizieren. In einer Konfusionsmatrix werden die tatsächlichen und die von dem Modell vorhergesagten Klassen gegenübergestellt. Die Matrix ist in vier Quadranten unterteilt: true positives (TP), true negatives (TN), false positives (FP) und false negatives (FN). TP sind die Fälle, in denen das Modell die Klasse richtig vorhergesagt hat, TN sind die Fälle, in denen das Modell die Klasse richtig vorhergesagt hat und diese Klasse auch tatsächlich vorliegt, FP sind die Fälle, in denen das Modell eine Klasse vorhergesagt hat, die in Wirklichkeit nicht vorliegt, und FN sind die Fälle, in denen das Modell eine Klasse nicht vorhergesagt hat, die in Wirklichkeit vorliegt. Eine Konfusionsmatrix ist hilfreich, um die Genauigkeit, Sensitivität und Spezifität des Modells zu berechnen und um zu sehen, an welchen Stellen das Modell Schwächen hat. Sie kann auch verwendet werden, um die Leistung von verschiedenen Modellen miteinander zu vergleichen.
plot_confusion_matrix <- function(predictions, true_values, title = "") {
# Erstelle eine Confusion Matrix als Data Frame
confusion_matrix_df <- data.frame(predictions, true_values)
# Zähle die Häufigkeiten jeder Kombination von Vorhersage- und True-Werten
counts_df <- count(confusion_matrix_df, predictions, true_values)
# Erstelle einen ggplot-Plot
ggplot(data = counts_df, aes(x = predictions, y = true_values)) +
geom_tile(aes(fill = n)) +
geom_text(aes(label = n)) +
scale_fill_gradient(low = "white", high = "darkgreen") +
labs(x = "Predicted Class", y = "True Class", title = paste("Confusion Matrix", title))
}ROC / AUC
Diese Funktion zeichnet die ROC-Kurve und berechnet die Area und Curve.
Die ROC-Kurve (Receiver Operating Characteristic curve) ist ein wichtiges Werkzeug zur Bewertung von Klassifikatoren. Sie zeigt die Leistung des Klassifikators bei verschiedenen Schwellenwerten an, die zur Unterscheidung zwischen zwei Klassen verwendet werden. Die ROC-Kurve ist besonders nützlich, wenn die beiden Klassen im Verhältnis unausgeglichen sind, wie es oft der Fall ist, wenn es darum geht, seltene Ereignisse wie Krankheiten oder Betrug zu erkennen.
Die ROC-Kurve ist auf der x-Achse der falsch-positiv-Rate (FPR) und auf der y-Achse der wahr-positiv-Rate (TPR) aufgetragen. Der FPR gibt an, wie viele falsch positive Ergebnisse es gibt, während der TPR angibt, wie viele wahr positive Ergebnisse erzielt werden. Ein perfekter Klassifikator würde eine ROC-Kurve haben, die im oberen linken Bereich beginnt und nach rechts oben verläuft, wobei alle Fälle korrekt klassifiziert werden. Ein zufälliger Klassifikator würde eine diagonal verlaufende ROC-Kurve haben, da die FPR und TPR zufällig verteilt sind.
Die AuC (Area Under the Curve) ist eine Metrik, die aus der ROC-Kurve berechnet wird und die Leistung des Klassifikators zusammenfasst. Sie gibt an, wie gut der Klassifikator im Vergleich zu einem zufälligen Klassifikator ist. Eine AUC von 1 bedeutet, dass das Modell perfekt in der Lage ist, positive und negative Klassen zu unterscheiden, während eine AUC von 0.5 bedeutet, dass das Modell keine bessere Leistung als Zufall erzielt. Die AUC kann Werte zwischen 0 und 1 annehmen. Eine AUC von 0 bedeutet, dass das Modell völlig inkorrekt ist. Im Allgemeinen gilt, je größer die AUC, desto besser ist das Modell im Vergleich zu anderen Modellen.
make_roc_plot_and_get_auc <- function(predictions, true_values)
{
roc_curve <- roc(response = (as.numeric(true_values) - 1), predictor = as.numeric(predictions))
auc_score <- auc(roc_curve)
plot(roc_curve, xlab = "False Positive Rate", ylab = "True Positive Rate", main ="ROC Curve")
legend(x = "bottomright", legend=c(paste("AUC:", auc_score)))
}Threshold Plot
find_best_threshold <- function(predictions, actual_values) {
best_threshold <- 0
best_f1 <- 0
thresholds <- seq(0.01, 0.99, 0.01)
f1_scores <- rep(0, length(thresholds))
for (i in 1:length(thresholds)) {
# Set the threshold for the predictions
predictions_threshold <- ifelse(predictions > thresholds[i], TRUE, FALSE)
if (all(predictions_threshold)) {
next
} else if (all(!predictions_threshold)) {
next
}
# Calculate the f1
f1 <- get_metrics(predictions_threshold, actual_values, "best threshold")$f1
f1_scores[i] <- f1
# Update the best threshold and best f1 if necessary
if (f1 > best_f1) {
best_threshold <- thresholds[i]
best_f1 <- f1
}
}
# Display the best threshold and best recall
print(paste("Best threshold:", best_threshold))
print(paste("Best F1:", best_f1))
plot(thresholds, f1_scores, type = "l", xlab = "Threshold", ylab = "F1 Score", main = "F1 Score with different thresholds")
return(best_threshold)
}Vorgehen
Um ein geeignets Modell zu finden, werden wir verschiedene Modell-Alogirthmen auf den Trainingsdaten anzuwenden und versuchen, diese zu optimieren. Wir starten dabei mit einem vorgegebenen Baseline Modell. Jedes Modell schauen wir kurz individuell an. Am Schluss werden die verschiedenen Modelle nochmals gesamthaft miteinander verglichen. Dabei schauen wir verschiedene Metriken, Top-N-Listen, Feature-Importance und weitere Informationen wie die ROC-Kurve oder Konfusionsmatrizen. Diese Informationen erhalten wir über 10-fache-Kreuzvalidierung. Wir trainieren also jedes Modell 10 Mal mit verschiedenen 90% der Trainingsdaten und berechnen unsere Metriken und weiteren Informationen auf den restlichen 10%.
Doch welche Metrik in unserer Liste ist die relevanteste für uns? Beim Modell geht es darum, Kunden zu finden, welche am ehesten eine Kreditkarte kaufen würden. Diesen Kunden würden dann für die Bank interessant werden und eine gewisse Massnahme würde ergriffen werden, sei es das Schicken einer Werbung oder das Unterbreiten eines Angebots. Da dies mit einem zeitlichen Aufwand verbunden ist und Kunden, welche ein solches Angebot oder eine Werbung bekommen aber kein Interesse haben, eher genervt davon werden würden, sollen die vom Modell als positiv klassifizierten Fälle möglichst tatsächlich positiv sein. Daher schauen wir bei den Modellen vor allem auf die Precision.
Baseline Modell
Als erstes soll eine logistische Regression mit den Informationen Alter, Geschlecht, Domizilregion, Vermögen (balance-Schnitt über alle Monate) und Umsatz (difference-Schnitt über alle Monate) als Baseline Modell erstellt werden.Dafür müssen wir kurz ein neues Dataframe erstellen.
baseline_data <- final_df
baseline_data$mean_balance <- rowMeans(final_df[, c("mean_balance_1", "mean_balance_2", "mean_balance_3", "mean_balance_4",
"mean_balance_5", "mean_balance_6", "mean_balance_7", "mean_balance_8",
"mean_balance_9", "mean_balance_10", "mean_balance_11", "mean_balance_12")])
baseline_data$mean_difference <- rowMeans(final_df[, c("mean_difference_1", "mean_difference_2", "mean_difference_3", "mean_difference_4",
"mean_difference_5", "mean_difference_6", "mean_difference_7", "mean_difference_8",
"mean_difference_9", "mean_difference_10", "mean_difference_11", "mean_difference_12")])
baseline_data <- baseline_data[, c("age", "gender", "region", "has_card", "mean_balance", "mean_difference", "issued")]
baseline_data$has_card <- as.factor(baseline_data$has_card)Darauf wird ein Train-Test-Split mit 80% Trainingsdaten und 20% Testdaten gebraucht.
splits <- split_data(baseline_data, test_size = 0.2)
train <- splits$train
test <- splits$test
train_sets <- splits$train_sets
val_sets <- splits$val_setsDas Regressionsmodell wird auf den Trainingsdaten trainiert. Wir verwenden die Funktion glm von der Library “stats”. Bei jedem Modell müssen die Predictions gemacht und damit die Metriken erstellt werden. Da die logistische Regression eine Zahl zwischen 0 und 1 zurückgibt, müssen wir anhand eines Thresholds die Werte zu TRUE und FALSE umwandeln. Der Threshold gibt an, ab welchem Wert eine Vorhersage als positiv betrachtet wird. Standardmäßig ist der Threshold auf 0.5 gesetzt, was bedeutet, dass alle Kunden mit einem Wert grösser als 0.5 als Kartenkäufer betrachtet werden.Die Werte für jede Validierung werden in einer Liste gespeichert. Als erstes wollen wir uns die durchschnittlichen Metriken anschauen.
regression_baseline_metrics <- list()
regression_baseline_predictions <- list()
regression_baseline_predictions_threshold <- list()
for(i in 1:length(val_sets)) {
regression_baseline <- glm(has_card ~ ., data = train_sets[[i]], family = binomial)
regression_baseline_predictions[[i]] <- predict(regression_baseline, val_sets[[i]], type = "response")
threshold <- 0.5
regression_baseline_predictions_threshold[[i]] <- ifelse(regression_baseline_predictions[[i]] > threshold, TRUE, FALSE)
regression_baseline_metrics[[i]] <- get_metrics(regression_baseline_predictions_threshold[[i]], val_sets[[i]]$has_card, "Logistic Regression Baseline")
}
regression_baseline_metrics <- do.call("rbind", regression_baseline_metrics)
metrics_all <- regression_baseline_metrics
colMeans(regression_baseline_metrics %>% select(-model)) accuracy kappa matthews precision recall f1
0.7778761 0.7763595 0.5589070 0.7795205 0.7846058 0.7801271 #regression_baseline_explainer <- explain(regression_baseline, data = train)Um die Konfusionsmatrix anzuzeigen berechnen wir den Schnitt des Wertes der logistischen Regression für jeden Kunden
id_set <- 10
plot_confusion_matrix(regression_baseline_predictions_threshold[[id_set]], val_sets[[id_set]]$has_card)
make_roc_plot_and_get_auc(regression_baseline_predictions[[id_set]], val_sets[[id_set]]$has_card)Setting levels: control = 0, case = 1
Setting direction: controls < cases
Regressionsmodell mit allen Daten
Nun soll dieses Baseline-Modell verbessert werden. Als erstes probieren wir, das gleiche Modell (Logistische Regression) mit mehr Input-Parametern zu trainieren.
Da die logistische Regression Probleme mit Faktoren hat, welche nur im Trainings- bzw. Testdatensatz vorkommen und auch nicht gut mit NA’s umgehen kann, müssen wir zuerst noch einige Anpassungen am Datensatz vornehmen.
Als erstes entfernen wir alle Kolonnen, welche Faktoren sind und mehr als 10 verschiedene Ausprägungen haben.
# Ermittle die numerischen Merkmale in den Trainingsdaten
numeric_vars <- sapply(final_df, is.numeric)
# Erstelle ein Subset der Trainingsdaten ohne die numerischen Merkmale
train_no_numeric <- final_df[, !numeric_vars]
# Ermittle die Anzahl der Kategorien für jedes Merkmal
num_categories <- sapply(train_no_numeric, function(x) length(unique(x)))
# Überprüfe, ob ein Merkmal zu viele Kategorien hat
too_many_categories <- num_categories > 10
# Gib die Namen der Merkmale aus, die zu viele Kategorien haben
columns_to_remove <- colnames(train_no_numeric)[too_many_categories]
# Ermittle die Spaltennamen, die behalten werden sollen
keep_columns <- setdiff(colnames(final_df), columns_to_remove)
# Erstelle ein Subset des Dataframes mit den behaltenen Spaltennamen
final_df_simplified <- final_df[, keep_columns]
columns_to_remove[1] "date" "issued" "district_name" "district_name.accounts"Nun muss der Datensatz noch auf NA’s überprüft werden.
# Count the number of NA values in the data frame
num_na <- sum(is.na(final_df_simplified))
# Print the total number of NA values
print(paste("Total number of NA values:", num_na))[1] "Total number of NA values: 70"# Create a logical vector indicating whether each element is NA
na_matrix <- is.na(final_df_simplified)
# Sum the number of NA values per row
na_counts <- rowSums(na_matrix)
# Count the rows with NA values
num_na_rows <- sum(na_counts > 0)
# Print the number of rows with NA values
print(paste("Number of rows with NA values:", num_na_rows))[1] "Number of rows with NA values: 18"# Sum the number of NA values per column
na_counts_cols <- colSums((na_matrix))
# Count the columns with NA values
num_na_cols <- sum(na_counts_cols > 0)
# Print the number of columns with NA values
print(paste("Number of columns with NA values:", num_na_cols))[1] "Number of columns with NA values: 4"Fast jede Zeile hat irgendwo ein NA. Es sind auch viele Kolonnen betroffen. Wir können also nicht alle Observationen oder Variabeln mit NA’s entfernen, da sonst der Datenverlust sehr gross wäre. Daher imputieren wir die numerischen fehlenden Werte mit dem Median und die fehlenden kategorialen Werte mit dem Wert, welcher am meisten vorkommt.
# Impute NA numbers with the median
final_df_simplified <- final_df_simplified %>%
mutate_if(is.numeric, list(~ if_else(is.na(.), median(., na.rm = TRUE), as.double(.))))
# Impute NA strings/factors with the most common value
final_df_simplified <- final_df_simplified %>%
mutate_if(is.character, list(~ if_else(is.na(.), mode(.), .)))Wir überprüfen nochmals, ob es keine fehlenden Werte mehr gibt.
sum(is.na(final_df_simplified))[1] 0Da das Kaufdatum für den Split benötigt wird aber vorher entfernt wurde, da es mehr als 10 verschiedene Ausprägungen annehmen kann, fügen wir es hier nochmals zum neuen Datensatz hinzu.
final_df_simplified$issued <- final_df$issuedsplits <- split_data(final_df_simplified, test_size = 0.2)
train <- splits$train
test <- splits$test
train_sets <- splits$train_sets
val_sets <- splits$val_setsregression_all_metrics <- list()
regression_all_predictions <- list()
regression_all_predictions_threshold <- list()
for(i in 1:length(val_sets)) {
regression_all <- glm(has_card ~ ., data = train_sets[[i]], family = binomial)
regression_all_predictions[[i]] <- predict(regression_all, val_sets[[i]], type = "response")
threshold <- 0.5
regression_all_predictions_threshold[[i]] <- ifelse(regression_all_predictions[[i]] > threshold, TRUE, FALSE)
regression_all_metrics[[i]] <- get_metrics(regression_all_predictions_threshold[[i]], val_sets[[i]]$has_card, "Logistic Regression All")
}Warnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenWarnung: glm.fit: Angepasste Wahrscheinlichkeiten mit numerischem Wert 0 oder 1 aufgetretenWarnung: Vorhersage durch Fit ohne vollen Rang mag täuschenregression_all_metrics <- do.call("rbind", regression_all_metrics)
metrics_all <- bind_rows(metrics_all, regression_all_metrics)
colMeans(regression_all_metrics %>% select(-model)) accuracy kappa matthews precision recall f1
0.7796460 0.7781299 0.5616727 0.7869296 0.7736214 0.7785520 #regression_all_explainer <- explain(regression_all, data = train)plot_confusion_matrix(regression_all_predictions_threshold[[id_set]], val_sets[[id_set]]$has_card)
make_roc_plot_and_get_auc(regression_all_predictions[[id_set]], val_sets[[id_set]]$has_card)Setting levels: control = -1, case = 0
Setting direction: controls < cases
#plot_feature_importance(regression_all)Decision Tree
Für den Decison Tree verwenden wir das Package “rpart”.
decision_tree_metrics <- list()
decision_tree_predictions <- list()
decision_tree_predictions_threshold <- list()
for(i in 1:length(val_sets)) {
decision_tree <- rpart(has_card ~ ., data = train_sets[[i]], method = "class")
decision_tree_predictions[[i]] <- predict(decision_tree, val_sets[[i]], type = "prob")[, 2]
threshold <- 0.5
decision_tree_predictions_threshold[[i]] <- ifelse(decision_tree_predictions[[i]] > threshold, TRUE, FALSE)
decision_tree_metrics[[i]] <- get_metrics(decision_tree_predictions_threshold[[i]], val_sets[[i]]$has_card, "Decision Tree")
}
decision_tree_metrics <- do.call("rbind", decision_tree_metrics)
metrics_all <- bind_rows(metrics_all, decision_tree_metrics)
colMeans(decision_tree_metrics %>% select(-model)) accuracy kappa matthews precision recall f1
0.8486726 0.8475432 0.7034824 0.8136636 0.9082925 0.8574300 make_roc_plot_and_get_auc(decision_tree_predictions[[id_set]], val_sets[[id_set]]$has_card)Setting levels: control = -1, case = 0
Setting direction: controls < cases
Decision Trees sind in der Lage, mit einer grossen Anzahl von Merkmalen umzugehen. Es kann aber auch von Vorteil sein, nicht alle Merkmale zu benutzen, um Überanpassung zu vermeiden und dadurch die Performance des Modells zu verbessern. Dies kann auch die Interpretierbarkeit des Modells erhöhen und die Kosten für das Training und die Auswertung des Modells reduzieren.
Daher wollen wir als nächstes untersuchen, ob das Modell besser wird, wenn nicht alle Features verwendet werden.
Dafür benutzen wir die Funktion RFE vom Paket caret. RFE steht für “Recursive Feature Elimination” (rekursive Merkmalsentfernung) und ist eine Technik, die verwendet wird, um eine Teilmenge der relevantesten Merkmale aus einem gegebenen Datensatz auszuwählen. Das Hauptziel von RFE ist es, die Anzahl der Merkmale im Datensatz zu reduzieren, während die Fähigkeit des Modells, präzise vorherzusagen, erhalten bleibt oder sogar verbessert wird.
Der RFE-Algorithmus funktioniert, indem er Merkmale rekursiv aus dem Datensatz entfernt und bei jedem Schritt ein Modell auf den verbleibenden Merkmalen trainiert. Das Merkmal, das die geringste Beitrag zur Modellleistung hat, wird bei jedem Schritt entfernt. Der Vorgang wird dann wiederholt, bis eine bestimmte Anzahl von Merkmalen erreicht ist oder bis keine weiteren Verbesserungen der Modellleistung erreicht werden.
Da der RFE bereits mit Cross-Validation arbeitet, benutzen wir hier das gesamte Trainingsset. Danach machen wir nochmals unsere eigene Kreuzvalidierung mit dem gefundenen Subset der Input-Parametern. Wir möchten den Datensatz auf 10 Features reduzieren. Dabei entfernen wir bei jedem Durchlauf 10 Features.
if (FALSE) {
set.seed(27)
# transform has_card to factor and remove status
train$has_card <- as.factor(train$has_card)
train$status <- NULL
control <- rfeControl(functions = caretFuncs,
method = "repeatedcv",
repeats = 5)
# Perform RFE
rfe_dt <- rfe(x = train %>% select(-has_card), y = train$has_card,
sizes = c(seq(from = 200, to = 10, by = -10)),
rfeControl = control,
method = "rpart")
# Extract the selected features
selected_features <- rfe_dt$optVariables
}Um den Decision Tree noch weiter zu verbessern, wollen wir die verschiedenen Hyperparameter optimieren. Hyperparameteroptimierung (auch Tuning genannt) ist der Prozess, die beste Set von Hyperparametern für ein maschinelles Lernmodell zu finden. Wir probieren, folgenden Parameter zu optimieren:
cp : der Complexity-Parameter, der die Kompliziertheit des Baums reguliert, indem er die Größe des Baums beschränkt. Je kleiner cp desto größer der Baum
Da die Metrik Precision in der Methode nicht vorhanden ist, probieren wir, auf Accuracy zu optimieren.
param_grid <- expand.grid(cp = c(0.001, 0.01, 0.1))
train$has_card <- as.factor(train$has_card)
decision_tree_tuned <- train(has_card ~ .,
data = train,
method = "rpart",
metric = "Accuracy",
tuneGrid = param_grid,
trControl = trainControl(method = "cv", number = 10))print(decision_tree_tuned)CART
1130 samples
221 predictor
2 classes: 'FALSE', 'TRUE'
No pre-processing
Resampling: Cross-Validated (10 fold)
Summary of sample sizes: 1017, 1017, 1017, 1017, 1018, 1017, ...
Resampling results across tuning parameters:
cp Accuracy Kappa
0.001 0.8000359 0.6000549
0.010 0.8513712 0.7026565
0.100 0.8336254 0.6671554
Accuracy was used to select the optimal model using the largest value.
The final value used for the model was cp = 0.01.decision_tree_tuned_metrics <- list()
decision_tree_tuned_predictions <- list()
decision_tree_tuned_predictions_threshold <- list()
for(i in 1:length(val_sets)) {
decision_tree_tuned_predictions[[i]] <- predict(decision_tree_tuned, val_sets[[i]], type = "prob")[, 2]
threshold <- 0.5
decision_tree_tuned_predictions_threshold[[i]] <- ifelse(decision_tree_tuned_predictions[[i]] > threshold, TRUE, FALSE)
decision_tree_tuned_metrics[[i]] <- get_metrics(decision_tree_tuned_predictions_threshold[[i]], val_sets[[i]]$has_card, "Decision Tree (Tuned)")
}
decision_tree_tuned_metrics <- do.call("rbind", decision_tree_tuned_metrics)
metrics_all <- bind_rows(metrics_all, decision_tree_tuned_metrics)
colMeans(decision_tree_tuned_metrics %>% select(-model)) accuracy kappa matthews precision recall f1
0.8619469 0.8609005 0.7296590 0.8227344 0.9240998 0.8700068 make_roc_plot_and_get_auc(decision_tree_tuned_predictions[[id_set]], val_sets[[id_set]]$has_card)Setting levels: control = -1, case = 0
Setting direction: controls < cases
Die Klassifikation ist um einiges besser auf dem Decision Tree. Es scheint also für unseren Verwendungszweck der bessere Algorithmus zu sein. Wir untersuchen noch Erweiterungen des Decision Trees: den Random Forest und XGBoost
Random Forest
Für den Random Forest brauchen wir das Package “randomForest”. Es verwendet Breiman’s random forest algorithmus und kann für Klassifikation und Regression verwendet werden.
Beim Random Forest muss unsere Zielvariabel noch in einen Faktor umgewandelt werden, damit ein Wert zwischen 0 und 1 vorhergesagt werden kann.
random_forest_metrics <- list()
random_forest_predictions <- list()
random_forest_predictions_threshold <- list()
for(i in 1:length(val_sets)) {
train_sets[[i]]$has_card <- as.factor(train_sets[[i]]$has_card)
random_forest <- randomForest(has_card ~ ., data = train_sets[[i]], method = "class")
random_forest_predictions[[i]] <- predict(random_forest, val_sets[[i]], type = "prob")[, 2]
threshold <- 0.5
random_forest_predictions_threshold[[i]] <- ifelse(random_forest_predictions[[i]] > threshold, TRUE, FALSE)
random_forest_metrics[[i]] <- get_metrics(random_forest_predictions_threshold[[i]], val_sets[[i]]$has_card, "Random Forest")
}
random_forest_metrics <- do.call("rbind", random_forest_metrics)
metrics_all <- bind_rows(metrics_all, random_forest_metrics)
colMeans(random_forest_metrics %>% select(-model)) accuracy kappa matthews precision recall f1
0.8557522 0.8546681 0.7216010 0.8112531 0.9326813 0.8664747 Der Random Forest ist ein wenig besser als der Decision Tree. Als nächstes wollen wir probieren, ob eine Hyperparameteroptimierung unser Resultat noch verbessern kann. Bei der Hyperparameteroptimierung gehen wir wieder gleich vor, wie beim Decision Tree. Wir probieren, folgende Parameter zu optimieren:
mtry : die Anzahl der Variablen, die zufällig als Kandidaten an einer Trennung ausgewählt werden. splitrule : die Trennregel, die verwendet wird, um die Qualität einer Trennung zu bewerten. “gini” Unreinheit und “extratrees” sind zwei häufig verwendete Trennregeln. min.node.size : die minimale Anzahl von Beobachtungen in einem Endknoten. max.depth : die maximale Tiefe des Baumes. Es ist eine Sequenz von Ganzzahlen von 1 bis 30 mit einem Schritt von 5. ntree : die Anzahl der Bäume, die im Zufallswald gewachsen sind.
param_grid <- expand.grid(mtry = c(0.1, 1, 10, 100))
# Define the model using the train() function
random_forest_tuned <- train(has_card ~ .,
data = train,
method = "rf",
metric = "Accuracy",
tuneGrid = param_grid,
trControl = trainControl(method = "cv", number = 10))Warnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeWarnung: invalid mtry: reset to within valid rangeprint(random_forest_tuned$bestTune)Auch hier nehmen wir wieder das optimierte Modell und untersuchen es mit unserer eigenen Kreuzvalidierung.
random_forest_tuned_metrics <- list()
random_forest_tuned_predictions <- list()
random_forest_tuned_predictions_threshold <- list()
for(i in 1:length(val_sets)) {
train_sets[[i]]$has_card <- as.factor(train_sets[[i]]$has_card)
random_forest_tuned <- randomForest(has_card ~ ., data = train_sets[[i]], method = "class", mtry = 100)
random_forest_tuned_predictions[[i]] <- predict(random_forest_tuned, val_sets[[i]], type = "prob")[, 2]
threshold <- 0.5
random_forest_tuned_predictions_threshold[[i]] <- ifelse(random_forest_tuned_predictions[[i]] > threshold, TRUE, FALSE)
random_forest_tuned_metrics[[i]] <- get_metrics(random_forest_tuned_predictions_threshold[[i]], val_sets[[i]]$has_card, "Random Forest (Tuned)")
}
random_forest_tuned_metrics <- do.call("rbind", random_forest_tuned_metrics)
metrics_all <- bind_rows(metrics_all, random_forest_tuned_metrics)
colMeans(random_forest_tuned_metrics %>% select(-model)) accuracy kappa matthews precision recall f1
0.8548673 0.8537778 0.7167719 0.8146861 0.9220237 0.8642322 make_roc_plot_and_get_auc(random_forest_tuned_predictions[[id_set]], val_sets[[id_set]]$has_card)Setting levels: control = -1, case = 0
Setting direction: controls < cases
if (FALSE) {
set.seed(27)
# transform has_card to factor and remove status
train$has_card <- as.factor(train$has_card)
train$status <- NULL
control <- rfeControl(functions = caretFuncs,
method = "repeatedcv",
repeats = 5)
# Perform RFE
rfe_dt <- rfe(x = train %>% select(-has_card), y = train$has_card,
sizes = c(seq(from = 200, to = 10, by = -10)),
rfeControl = control,
method = "rpart")
# Extract the selected features
selected_features <- rfe_dt$optVariables
selected_features
}XGBoost
Das XGBoost Modell wird mit der Library “xgboost” trainiert. Da es Probleme mit nicht-numerischen Variabeln gab, wurden diese entfernt.
xg_boost_metrics <- list()
xg_boost_predictions <- list()
xg_boost_predictions_threshold <- list()
for(i in 1:length(val_sets)) {
train_data <- train_sets[[i]] %>% select_if(is.numeric)
test_data <- val_sets[[i]] %>% select_if(is.numeric)
train_data <- cbind(as.numeric(train_sets[[i]]$has_card), train_data)
test_data <- cbind(as.numeric(val_sets[[i]]$has_card), test_data)
train_preds <- as.matrix(sapply(train_data[,-1], as.numeric))
train_labels <- train_data[, 1]
test_preds <- as.matrix(sapply(test_data[,-1], as.numeric))
test_labels <- test_data[, 1]
param <- list(max_depth = 100, eta = 0.1, nthread = 2)
# Train the model
xg_boost <- xgboost(data = train_preds, label = train_labels - 1, nrounds = 100, objective = "binary:logistic", verbose = 0, maximize = "precision", params = param)
# Make predictions on the test data
xg_boost_predictions[[i]] <- predict(xg_boost, test_preds)
threshold <- 0.5
xg_boost_predictions_threshold[[i]] <- ifelse(xg_boost_predictions[[i]] > threshold, TRUE, FALSE)
xg_boost_metrics[[i]] <- get_metrics(xg_boost_predictions_threshold[[i]], val_sets[[i]]$has_card, "XGBoost")
}
xg_boost_metrics <- do.call("rbind", xg_boost_metrics)
metrics_all <- bind_rows(metrics_all, xg_boost_metrics)
colMeans(xg_boost_metrics %>% select(-model)) accuracy kappa matthews precision recall f1
0.8530973 0.8519924 0.7139956 0.8114266 0.9236826 0.8630563 Mit Hyperparameteroptimierung:
if (FALSE) {
train_data <- train_sets[[i]]
test_data <- val_sets[[i]]
train_data <- train_sets[[i]] %>% select_if(is.numeric)
test_data <- val_sets[[i]] %>% select_if(is.numeric)
train_data <- cbind(as.numeric(train_sets[[i]]$has_card), train_data)
test_data <- cbind(as.numeric(val_sets[[i]]$has_card), test_data)
train_preds <- as.matrix(sapply(train_data[,-1], as.numeric))
train_labels <- train_data[, 1]
test_preds <- as.matrix(sapply(test_data[,-1], as.numeric))
test_labels <- test_data[, 1]
param_grid <- expand.grid(nrounds = c(1000, 2000, 5000),
eta = c(0.1, 0.2, 0.3),
max_depth = c(3, 5, 7, 10),
gamma = c(0, 0.1, 0.2, 1),
colsample_bytree = c(0.5, 0.8),
min_child_weight = c(1, 3, 5),
subsample = c(0.5, 0.8, 1))
xg_boost_hyperparameter <- train(x = train_preds, y = train_labels, method = "xgbTree", trControl = trainControl(method = "cv", number = 10), tuneGrid = param_grid, metric = "Accuracy", verbose = FALSE, verbosity = 0)
}make_roc_plot_and_get_auc(xg_boost_predictions[[id_set]], val_sets[[id_set]]$has_card)Setting levels: control = -1, case = 0
Setting direction: controls < cases
Das “beste” Modell
Um nun herauszufinden, welches unserer Modelle das beste ist, vergleichen wir die Modelle auf verschiedene Arten und Weisen. Dabei betrachten wir pro Modellalgorithmus nur das jeweils beste bezüglich der Precision. Also vergleichen wir vier Modelle: eine logistische Regression, ein Decision Tree, ein Random Forest und ein XGBoost.
Wir schauen die durchschnittlichen Scores, die Verteilung der Precisions anhand der Kreuzvalidierung, Top-N-Listen, Konfusionsmatrizen, ROC-Kurven und die Feature Importance aller Modelle an und versuchen so, das beste Modell zu evaluieren.
chosen_models <- c("Logistic Regression All", "Decision Tree", "Random Forest", "XGBoost")
metrics_all <- metrics_all %>% filter(model %in% chosen_models)Übersicht der durchschnittlichen Scores
metrics_all %>% group_by(model) %>% summarize_if(is.numeric, mean) %>% arrange(desc(precision))In dieser Darstellung sind die durchschnittlichen Scores über die Cross Validation pro Modell aufgezeigt. Das beste Modell bezüglich Train CV-Score ist der Random Forest. Er ist jedoch bei allen Kennzahlen fast deckungsgleich wie der XGBoost. Dies macht Sinn, da XGBoost eine Erweiterung des Random Forests ist.
Verteilungen der Precision
ggplot(data = metrics_all, aes(x = model, y = precision)) +
geom_boxplot() +
labs(title = "Verteilung der Precision pro Modell", x = "Modell", y = "Precision")
In dieser Darstellung werden die Verteilungen der CV-Scores pro Modell aufgezeigt. Ein gut optimiertes Modell sollte auf den Cross-Validation Sets möglichst ähnliche Scores aufweisen. Damit kann aufgezeigt werden, dass das Modell auf die verschiedenen Testdaten nicht overfittet. Wie wir hier sehen sind die Variationen der Precision eher klein. Die ähnlichsten Precision Resultate hat der Decision Tree.
Vergleich der Top-N-Listen
Hier vergleichen wir die Top-N-Listen der Modelle. Für jedes Modell wird eine Top-20 Liste der Kunden vom ersten und letzten Validierungsset der Kreuzvalidierung mit den höchsten Werten bei der Prediction gemacht. All diese Kunden müssten demnach Käufer sein. In den beiden Tabellen stellen wir dar, ob die Modelle auf den jeweiligen Positionen recht behalten haben oder nicht.
df <- data.frame()
for(i in 1:10)
{
users <- val_sets[[i]]
users$prediction <- decision_tree_predictions[[i]]
Decision_Tree <- head(users %>% arrange(desc(prediction)), 20)$has_card
users$prediction <- xg_boost_predictions[[i]]
XGBoost <- head(users %>% arrange(desc(prediction)), 20)$has_card
users$prediction <- regression_all_predictions[[i]]
Regression <- head(users %>% arrange(desc(prediction)), 20)$has_card
users$prediction <- random_forest_predictions[[i]]
RandomForest <- head(users %>% arrange(desc(prediction)), 20)$has_card
df_new <- data.frame(Regression, Decision_Tree, RandomForest, XGBoost)
df_new[] <- lapply(df_new, as.numeric)
# get 1 for inaccurate
df_new[] = 1 - df_new[]
if(dim(df)[1] == 0)
{
df <- df_new
}
else
{
df <- as.data.frame(as.matrix(df) + as.matrix(df_new))
}
#print(i)
}
dfIn dieser Darstellungen sind die Anzahl Fehlklassifikationen auf alle 10 Cross Validation Datensätze aufsummiert. Das perfekte Modell hätte auf allen Werten eine 0, also auf allen Top-N Vorhersagen keine Fehler gemacht.
Betrachten wir nur die Falschklassifikationen der Top-3 Vorhersagen, sehen wir, dass “Random Forest” und “XGBoost” am besten abschneiden. Der “Decision Tree” und die “logistische Regression” haben auf die Top-3 Vorhersagen drei oder mehr falsche Vorhersagen gemacht, die Forest Modelle nur null bis einen. XGBoost schneidet hier am besten ab.
Konfusionsmatrizen
Auch die Konfusionsmatrizen werden wieder für die verschiedenen Modelle dargestllt.
id_set <- 7
plot_confusion_matrix(regression_all_predictions_threshold[[id_set]], val_sets[[id_set]]$has_card, "Regression")
plot_confusion_matrix(decision_tree_predictions_threshold[[id_set]], val_sets[[id_set]]$has_card, "Decision Tree")
plot_confusion_matrix(random_forest_predictions_threshold[[id_set]], val_sets[[id_set]]$has_card, "Random Forest")
plot_confusion_matrix(xg_boost_predictions_threshold[[id_set]], val_sets[[id_set]]$has_card, "XGBoost")
Die Confusion Matritzen der Modelle sehen sich sehr grundsätzlich ähnlich. Einzig bei der logistischen Regression sind die false-positive Werte höher als bei den übrigen Modellen.
ROC Kurven
get_mean <- function(cv_results)
{
res <- as.matrix(cv_results[[1]])
for(i in 2:length(cv_results))
{
res = res + as.matrix(cv_results[[i]])
}
return(as.numeric(res / length(cv_results)))
}
make_roc_plot_and_get_auc_list <- function(predictions, true_values)
{
colors <- c("blue", "red", "black", "green")
auc_scores <- c()
for(i in 1:length(predictions))
{
roc_curve <- roc((as.numeric(true_values) - 1), as.numeric(predictions[[i]]))
auc_score <- auc(roc_curve)
auc_scores = append(auc_scores, auc_score)
if(i == 1)
{
plot(roc_curve, xlab = "False Positive Rate", ylab = "True Positive Rate", main ="ROC Curve", col=colors[i])
}
else
{
lines(roc_curve, xlab = "False Positive Rate", ylab = "True Positive Rate", main ="ROC Curve", col=colors[i])
}
}
legend("bottomright", legend=c(
paste("Logistic Regression AUC:", round(auc_scores[1], 3)),
paste("Decision Tree AUC:", round(auc_scores[2], 3)),
paste("Random Forest AUC:", round(auc_scores[3], 3)),
paste("XGBoost AUC:", round(auc_scores[4], 3))), col=colors, pch=4)
}
make_roc_plot_and_get_auc_list(list(regression_baseline_predictions[[id_set]], decision_tree_tuned_predictions[[id_set]], random_forest_tuned_predictions[[id_set]], xg_boost_predictions[[id_set]]), val_sets[[id_set]]$has_card)Setting levels: control = -1, case = 0
Setting direction: controls < cases
In dieser Grafik wurden die ROC Kurven der verschiedenen Modelle übereinander geplottet. Um dies auf den Trainingsdaten tun zu können, wurde ein zufälliges Train/Val Packet gewählt.
Die ROC Kurve sollte sich möglichst weit von der grauen Linie entfernen, dies tut sie auch bei allen Modellen recht gut. Es ist schwierig visuell zu erkennen, ob nun XGBoost oder Random Forest sich weiter nach oben links entfernt. Durch den AUC wird deutlich, dass der Random Forest leicht die Nase vorn hat.
Feature Importance
only_numeric <- train %>% select_if(is.numeric)
y <- factor(train$has_card, ordered = TRUE)
explainer_rf <- explain(
model = xg_boost,
data = train %>% select(-has_card),
y = train$has_card
)Preparation of a new explainer is initiated
-> model label : xgb.Booster ( default )
-> data : 1130 rows 221 cols
-> target variable : 1130 values
-> predict function : yhat.default will be used ( default )
-> predicted values : No value for predict function target column. ( default )
-> model_info : package Model of class: xgb.Booster package unrecognized , ver. Unknown , task regression ( default )
-> model_info : Model info detected regression task but 'y' is a factor . ( WARNING )
-> model_info : By deafult regressions tasks supports only numercical 'y' parameter.
-> model_info : Consider changing to numerical vector.
-> model_info : Otherwise I will not be able to calculate residuals or loss function.
-> predicted values : the predict_function returns an error when executed ( WARNING )
-> residual function : difference between y and yhat ( default )
-> residuals : the residual_function returns an error when executed ( WARNING )
A new explainer has been created! importance_matrix = xgb.importance(colnames(train_preds), model = xg_boost)
xgb.plot.importance(importance_matrix[1:5,])
Reduzieren des besten Modelles
Lift Kurve?
Bestes Modell auf den Testdaten
Das beste Modell bezüglich der errechneten Scores, des RUC/AUC ist der Random Forest. In der Top-N Analyse und der Confusion Matrix ist er mit der Beste und annähernd so performant wie XGBoost. In Folge wird nun der Random Forest auf allen Trainingsdaten trainiert und auf den Testdaten analysiert.
#refit
train$has_card <- as.factor(train$has_card)
random_forest_refit <- randomForest(has_card ~ ., data = train, method = "class", mtry = 100)
random_forest_refit_predictions <- predict(random_forest_refit, test, type = "prob")[, 2]
threshold <- 0.5
random_forest_refit_predictions_threshold <- ifelse(random_forest_refit_predictions > threshold, TRUE, FALSE)
random_forest_refit_metrics <- get_metrics(random_forest_refit_predictions_threshold, test$has_card, "Random Forest (Tuned)")
random_forest_refit_metricsNADie Scores auf dem Testdaten fallen wie zu erwarten war etwas tiefer aus als die gemittelten Train Scores. Die Accuracy bleibt jedoch noch über 0.8.
make_roc_plot_and_get_auc(random_forest_refit_predictions, test$has_card)Setting levels: control = -1, case = 0
Setting direction: controls < cases
Auch die ROC Kurve und der AUC Wert fällt etwas tiefer aus, ist jedoch vergleichbar wie das vorherige Sample aus dem train/val sample.
Mit Off-Time
Ohne Off-Time
Fazit
Mehrwert des Modells in der Praxis
Bei unserem Model handelt es sich um ein Product Affinity Model. Es soll voraussagen, ob eine Person (hier eine Kund:in der Bank) ein bestimmtes Produkt kauft (hier eine Kreditkarte) oder nicht. Ausserdem gibt unser Modell auch an, mit welcher Wahrscheinlichkeit sie diese kauft. Dies könnte von grossem Mehrwert für eine Bank sein, da sie anhand des Modells die Marketing-Strategie optimieren und ihre Ressourcen gezielter einsetzen können.
Es kann Banken helfen, ihre Marketing-Bemühungen besser zu segmentieren, indem es zeigt, wer wahrscheinlich an einer Kreditkarte interessiert ist und wer nicht. Dies kann dazu beitragen, die Conversion-Rate zu verbessern und die Kosten für Marketing-Aktionen zu senken.
Ein weiterer Vorteil, den ein Product Affinity Model bieten kann, ist, dass es Banken helfen kann, ihre Kundenbeziehungen zu verbessern, indem es ihnen ermöglicht, personalisierte Angebote und Services anzubieten.
Wenn das Modell vorhersagt, wer wahrscheinlich eine Kreditkarte kaufen wird, können Banken ihren Kunden personalisierte Angebote und Services anbieten, die auf ihre individuellen Bedürfnisse und Vorlieben abgestimmt sind. Dies kann dazu beitragen, die Kundenzufriedenheit zu erhöhen und die Kundenbindung zu stärken. Dafür müsste das Modell aber noch erweitert werden.
Ein personalisiertes Angebot könnte beispielsweise eine Kreditkarte sein, die speziell auf die Bedürfnisse und Vorlieben eines Kunden abgestimmt ist, z.B. mit einem hohen Rückzahlungsprozentsatz für bestimmte Kategorien von Einkäufen oder mit Reiseversicherungen und anderen Vorteilen, die für den Kunden besonders wichtig sind.
Indem Banken ihren Kunden personalisierte Angebote und Services anbieten, können sie ihre Beziehungen zu ihnen stärken und ihre Zufriedenheit erhöhen.
LS0tDQp0aXRsZTogImFtbCINCmF1dGhvcjogIlBhc2NhbCBCZXJnZXIgdW5kIFJhcGhhZWwgU3RyZWJlbCINCmRhdGU6ICIxOC4gT2t0b2JlciAyMDIyIg0Kb3V0cHV0Og0KICBodG1sX2RvY3VtZW50Og0KICAgIHRvYzogeWVzDQogICAgdG9jX2RlcHRoOiAnNCcNCiAgICBkZl9wcmludDogcGFnZWQNCiAgaHRtbF9ub3RlYm9vazoNCiAgICB0b2M6IHllcw0KICAgIHRvY19kZXB0aDogNA0KICAgIGRmX3ByaW50OiBwYWdlZA0KICAgIHRvY19mbG9hdDoNCiAgICAgIGNvbGxhcHNlZDogeWVzDQogICAgICBzbW9vdGhfc2Nyb2xsOiB5ZXMNCiAgICB0aGVtZTogdW5pdGVkDQogICAgaGlnaGxpZ2h0OiB0YW5nbw0KICAgIGNvZGVfZm9sZGluZzogaGlkZQ0KICBwZGZfZG9jdW1lbnQ6DQogICAgdG9jOiB5ZXMNCiAgICB0b2NfZGVwdGg6ICc0Jw0Kc3VidGl0bGU6IE1pbmktQ2hhbGxlbmdlIDENCmVkaXRvcl9vcHRpb25zOiANCiAgbWFya2Rvd246IA0KICAgIHdyYXA6IHNlbnRlbmNlDQotLS0NCg0KUi1WZXJzaW9uOiAqKlxbRGVmYXVsdFxdIFxbNjQtYml0XF0gQzpcXFByb2dyYW0gRmlsZXNcXFJcXFItNC4xLjAqKg0KDQojIEltcG9ydHMNCg0KYGBge3IgZWNobz1GQUxTRSwgY2FjaGU9RkFMU0UsIHJlc3VsdHM9RkFMU0UsIGNvbW1lbnQ9RkFMU0UsIHdhcm5pbmc9RkFMU0V9DQojIGNsZWFyIGVudmlyb25tZW50DQpybShsaXN0ID0gbHMoKSkNCg0KIyBuw7Z0aWdlIFBhY2tldGUNCnBhY2thZ2VzIDwtIGMoInRpZHl2ZXJzZSIsICJkYXRhLnRhYmxlIiwgInRpZHltb2RlbHMiLCAibHVicmlkYXRlIiwgImNhcmV0IiwgInBST0MiLCAicmFuZG9tRm9yZXN0IiwgInJwYXJ0IiwgInJwYXJ0LnBsb3QiLCAieGdib29zdCIsICJEQUxFWCIpDQoNCiMgTm9jaCBuaWNodCBpbnN0YWxsaWVydGUgUGFrZXRlIGluc3RhbGxpZXJlbg0KaW5zdGFsbGVkX3BhY2thZ2VzIDwtIHBhY2thZ2VzICVpbiUgcm93bmFtZXMoaW5zdGFsbGVkLnBhY2thZ2VzKCkpDQoNCmlmIChhbnkoaW5zdGFsbGVkX3BhY2thZ2VzID09IEZBTFNFKSkgew0KICBpbnN0YWxsLnBhY2thZ2VzKHBhY2thZ2VzWyFpbnN0YWxsZWRfcGFja2FnZXNdKQ0KfQ0KIyBMYWRlbiBkZXIgUGFja2V0ZQ0KaW52aXNpYmxlKGxhcHBseShwYWNrYWdlcywgbGlicmFyeSwgY2hhcmFjdGVyLm9ubHkgPSBUUlVFKSkNCg0KIyBjaGFuZ2Ugb3B0aW9ucw0Kb3B0aW9ucyhkcGx5ci5zdW1tYXJpc2UuaW5mb3JtID0gRkFMU0UpDQoNCnNldC5zZWVkKDI3KQ0KYGBgDQoNCkRpZSBEYXRlbiBoYWJlbiB3aXIgdm9uIGZvbGdlbmRlciBRdWVsbGUgYmV6b2dlbiB1bmQgd2VyZGVuIGF1Y2ggYXVmIGRpZXNlciBnZW5hdWVyIEJlc2NocmllYmVuOiA8aHR0cHM6Ly9zb3JyeS52c2UuY3ovfmJlcmthL2NoYWxsZW5nZS9QQVNUL2luZGV4Lmh0bWw+IChsaW5rZSBTZWl0ZSBQS0REJzk5IENoYWxsZW5nZSBcPiBEYXRhIFw+IEZpbmFuY2lhbCBEYXRhIERlc2NyaXB0aW9uKQ0KDQojIEVpbmxlc2VuIGRlciBEYXRlbg0KDQpEZXIgRGF0ZW5zYXR6IGJlc3RlaHQgYXVzIGFjaHQgdmVyc2NoaWVkZW5lbiBUYWJlbGxlbiwgd2VsY2hlIHRlaWxzIGR1cmNoIEZvcmVpZ24tS2V5cyBtaXRlaW5hbmRlciB2ZXJrbsO8cGZ0IHNpbmQuDQoNCmBgYHtyfQ0Kcm9vdF9wYXRoIDwtICIuL3hzZWxsaW5nX2JhbmtpbmdfZGF0YS0xL3hzZWxsaW5nX2JhbmtpbmdfZGF0YS8iDQoNCmFjY291bnRzIDwtIHJlYWQuY3N2KHBhc3RlMChyb290X3BhdGgsICJhY2NvdW50LmNzdiIpLCBoZWFkZXIgPSBUUlVFLCBzZXAgPSAiOyIpDQpjYXJkcyA8LSByZWFkLmNzdihwYXN0ZTAocm9vdF9wYXRoLCAiY2FyZC5jc3YiKSwgaGVhZGVyID0gVFJVRSwgc2VwID0gIjsiKQ0KY2xpZW50cyA8LSByZWFkLmNzdihwYXN0ZTAocm9vdF9wYXRoLCAiY2xpZW50LmNzdiIpLCBoZWFkZXIgPSBUUlVFLCBzZXAgPSAiOyIpDQpkaXNwb3NpdGlvbnMgPC0gcmVhZC5jc3YocGFzdGUwKHJvb3RfcGF0aCwgImRpc3AuY3N2IiksIGhlYWRlciA9IFRSVUUsIHNlcCA9ICI7IikNCmRpc3RyaWN0cyA8LSByZWFkLmNzdihwYXN0ZTAocm9vdF9wYXRoLCAiZGlzdHJpY3QuY3N2IiksIHNlcCA9ICI7IikNCmxvYW5zIDwtIHJlYWQuY3N2KHBhc3RlMChyb290X3BhdGgsICJsb2FuLmNzdiIpLCBoZWFkZXIgPSBUUlVFLCBzZXAgPSAiOyIpDQpvcmRlcnMgPC0gcmVhZC5jc3YocGFzdGUwKHJvb3RfcGF0aCwgIm9yZGVyLmNzdiIpLCBoZWFkZXIgPSBUUlVFLCBzZXAgPSAiOyIpDQp0cmFuc2FjdGlvbnMgPC0gcmVhZC5jc3YocGFzdGUwKHJvb3RfcGF0aCwgInRyYW5zLmNzdiIpLCBoZWFkZXIgPSBUUlVFLCBzZXAgPSAiOyIpDQpgYGANCg0KIyBDbGVhbmluZw0KDQojIyBBY2NvdW50cw0KDQpgYGB7cn0NCnNhbXBsZV9uKGFjY291bnRzLCA1KQ0KYGBgDQoNCkRpZSBBY2NvdW50LVRhYmVsbGUgZW50aMOkbHQgdmllciBLb2xvbm5lbjogZGllIEFjY291bnQtSUQsIGRpZSBEaXN0cmljdC1JRCAod2VsY2hlIGF1ZiBkaWUgRGlzdHJpY3QtVGFiZWxsZSB2ZXJ3ZWlzdCksIGRpZSBGcmVxdWVueiwgd2VsY2hlIGRpZSBIw6R1Zmlna2VpdCBkZXIgQXVzc3RlbGx1bmcgZGVyIEFicmVjaG51bmdlbiBhbHMgS2F0ZWdvcmllIGJlc2FndCwgdW5kIGRhcyBFcnN0ZWxsdW5nc2RhdHVtIGRlcyBBY2NvdW50cy4NCkRpZSBGcmVxdWVueiBrYW5uIGVpbmUgdm9uIGRyZWkgdmVyc2NoaWVkZW5lbiBXZXJ0ZW4gYW5uZWhtZW4uDQoNCmBgYHtyfQ0KdW5pcXVlKGFjY291bnRzJGZyZXF1ZW5jeSkNCmBgYA0KDQpOYWNoZm9sZ2VuZCBzb2xsZW4gZGllIEZyZXF1ZW56LVdlcnRlIMO8YmVyc2V0enQgdW5kIGRhcyBEYXR1bSBpbiBlaW4gcmljaHRpZ2VzIEZvcm1hdCB0cmFuc2Zvcm1pZXJ0IHdlcmRlbi4NCkF1c3NlcmRlbSBzb2xsIGRpZSBUYWJlbGxlIGF1ZiBmZWhsZW5kZSBXZXJ0ZSDDvGJlcnByw7xmdCB3ZXJkZW4uDQoNCmBgYHtyfQ0KYWNjb3VudHMkZGF0ZSA8LSBhcy5EYXRlKGFzLmNoYXJhY3RlcihhY2NvdW50cyRkYXRlKSwgZm9ybWF0PSAiJXklbSVkIikNCg0KYWNjb3VudHMkZnJlcXVlbmN5W2FjY291bnRzJGZyZXF1ZW5jeSA9PSAiUE9QTEFURUsgTUVTSUNORSJdICAgPC0gIm1vbnRobHkiDQphY2NvdW50cyRmcmVxdWVuY3lbYWNjb3VudHMkZnJlcXVlbmN5ID09ICJQT1BMQVRFSyBUWURORSJdICAgICA8LSAid2Vla2x5Ig0KYWNjb3VudHMkZnJlcXVlbmN5W2FjY291bnRzJGZyZXF1ZW5jeSA9PSAiUE9QTEFURUsgUE8gT0JSQVRVIl0gPC0gImFmdGVyX3RyYW5zYWN0aW9uIg0KDQpzdW0oaXMubmEoYWNjb3VudHMpKQ0KYGBgDQoNCldpZSBoaWVyIGdlemVpZ3Qgd3VyZGUsIGdpYnQgZXMga2VpbmUgZmVobGVuZGUgV2VydGUgaW4gZGllc2VtIERhdGFmcmFtZS4NCg0KIyMgQ2FyZHMNCg0KYGBge3J9DQpzYW1wbGVfbihjYXJkcywgNSkNCmBgYA0KDQpEaWUgQ2FyZC1UYWJlbGxlIGVudGjDpGx0IGRpZSBLb2xvbm5lbiBDYXJkLUlELCBEaXNwLUlEICh3ZWxjaGUgYXVmIGRpZSBEaXNwb3NpdG9uLVRhYmVsbGUgdmVyd2Vpc3QpLCBkZW4gVHlwIGRlciBLYXJ0ZSB1bmQgZGFzIEF1c3N0ZWxsdW5nc2RhdHVtLg0KQXVjaCBoaWVyIG11c3MgZGFzIERhdHVtIHVtZ2V3YW5kZWx0IHdlcmRlbi4NCkRlciB6ZWl0bGljaGUgVGVpbCB3aXJkIGlnbm9yaWVydCwgZGEgZXIgaW1tZXIgMCBpc3QuDQpXZWl0ZXIgd2VyZGVuIEdvbGQtS2FydGVuIHp1IG5vcm1hbGVuIEthcnRlbiB1bWdld2FuZGVsdCB1bmQgSnVuaW9yLUthcnRlbiBlbnRmZXJudCwgZGEgdW5zZXIgTW9kZWxsIGRhcyBLYXVmZW4gZWluZXIgbm9ybWFsZW4gS2FydGUgdm9yaGVyc2FnZW4gc29sbC4NCkF1Y2ggaGllciB3ZXJkZW4gd2llZGVyIGRpZSBmZWhsZW5kZW4gV2VydGUgZ2VwcsO8ZnQuDQoNCmBgYHtyfQ0KY2FyZHMkaXNzdWVkIDwtIGFzLkRhdGUoYXMuY2hhcmFjdGVyKGNhcmRzJGlzc3VlZCksIGZvcm1hdD0gIiV5JW0lZCIpDQoNCmNhcmRzJHR5cGVbY2FyZHMkdHlwZSA9PSAiZ29sZCJdICAgICA8LSAiY2xhc3NpYyINCmNhcmRzIDwtIGZpbHRlcihjYXJkcywgdHlwZSA9PSAiY2xhc3NpYyIpDQoNCnN1bShpcy5uYShjYXJkcykpDQpgYGANCg0KRXMgZ2lidCBrZWluZSBmZWhsZW5kZSBXZXJ0ZSwgd2VsY2hlIHdlaXRlcmUgQWt0aW9uZW4gZXJmb3JkZXJuIHfDvHJkZW4uDQoNCiMjIENsaWVudHMNCg0KYGBge3J9DQpzYW1wbGVfbihjbGllbnRzLCAxMCkNCmBgYA0KDQpEaWUgVGFiZWxsZSBDbGllbnRzIGVudGjDpGx0IGRpZSBDbGllbnQtSUQsIGRhcyBHZWJ1cnRzZGF0dW0gdW5kIGRpZSBEaXN0cmljdC1JRCAod2VsY2hlIGF1ZiBkaWUgRGlzdHJpY3QtVGFiZWxsZSB2ZXJ3ZWlzdCkuDQpEZXIgU3BhbHRlIEdlYnVydHNkYXR1bSBzaWVodCBtYW4gYXVmIGRlbiBlcnN0ZW4gQmxpY2sgZGllIERhdHVtc3LDpHByZXNlbnRhdGlvbiBuaWNodCBhbi4NCkluIGRlciBEb2t1IHdpcmQgYWJlciBkaWUgU3RydWt0dXIgZXJzaWNodGxpY2g6IERhcyBEYXR1bXNmb3JtYXQgaXN0IGbDvHIgTcOkbm5lciBZWU1NREQgdW5kIGbDvHIgRnJhdWVuIFlZTU1ERCs1MERELg0KDQpJbiBGb2xnZSB3aXJkIGRpZSBOdW1tZXIgaW4gaWhyZSBEYXR1bXNyw6RwcmVzZW50YXRpb24ga29udmVydGllcnQgdW5kIGRpZSBTcGFsdGUgImdlbmRlciIgYWxzIG1hbGUvZmVtYWxlIGF1Zmdlc2NobMO8c3NlbHQuDQpadWRlbSB3aXJkIGRhcyBBbHRlciBkZXIgS3VuZGVuIGltIEphaHIgMTk5OSBiZXJlY2huZXQsIGRhIGRlciBEYXRlbnNhdHogYXVzIGRpZXNlbSBKYWhyIHN0YW1tdC4NCkFuc2NobGllc3NlbmQga2FubiBkYXMgR2VidXJ0c2RhdHVtIGVudGZlcm50IHdlcmRlbi4NCg0KQXVzc2VyZGVtIHdlcmRlbiBhdWNoIGhpZXIgd2llZGVyIGRpZSBmZWhsZW5kZW4gV2VydGUgw7xiZXJwcsO8ZnQuDQoNCmBgYHtyfQ0KIyBNb250aHMgYWJvdmUgMTIgbXVzdCBiZSBmZW1hbGUNCmNsaWVudHMgPC0gbXV0YXRlKGNsaWVudHMsIGdlbmRlciA9IA0KICAgICAgICAgICAgICAgICAgICAgaWZlbHNlKHN1YnN0cihiaXJ0aF9udW1iZXIsIDMsIDQpID4gMTIsICJmZW1hbGUiLCAibWFsZSIpKQ0KDQojIFN1YnN0cmFjdCB0aGUgNTAgdG8gZ2V0IHRoZSBiaXJ0aCBtb250aA0KY2xpZW50cyA8LSBtdXRhdGUoY2xpZW50cywgYmlydGhfbW9udGggPQ0KICAgICAgICAgICAgICAgICAgICAgaWZlbHNlKGFzLm51bWVyaWMoc3Vic3RyKGJpcnRoX251bWJlciwgMywgNCkpID4gMTIsDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgYXMubnVtZXJpYyhzdWJzdHIoYmlydGhfbnVtYmVyLCAzLCA0KSkgLSA1MCwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICBhcy5udW1lcmljKHN1YnN0cihiaXJ0aF9udW1iZXIsIDMsIDQpKSkpDQoNCiMgVHJhbnNmb3JtIHRoZSBiaXJ0aF9udW1iZXIgdG8gYSBkYXRlDQpjbGllbnRzIDwtIG11dGF0ZShjbGllbnRzLCBiaXJ0aF9udW1iZXIgPSBwYXN0ZSgiMTkiLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgc3Vic3RyKGJpcnRoX251bWJlciwgMSwgMiksIA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgc3RyX3BhZChiaXJ0aF9tb250aCwgMiwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgcGFkID0gIjAiKSwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgIHN1YnN0cihiaXJ0aF9udW1iZXIsIDUsIDYpLA0KICAgICAgICAgICAgICAgICAgIHNlcCA9ICIiLCBjb2xsYXBzZSA9IE5VTEwpKQ0KY2xpZW50cyRiaXJ0aF9kYXRlIDwtIGFzLkRhdGUoYXMuY2hhcmFjdGVyKGNsaWVudHMkYmlydGhfbnVtYmVyKSwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICBmb3JtYXQ9ICIlWSVtJWQiKQ0KDQojIFJlbW92ZSB1bnVzZWQgY29sdW1ucw0KY2xpZW50cyRiaXJ0aF9tb250aCA8LSBOVUxMDQpjbGllbnRzJGJpcnRoX251bWJlciA8LSBOVUxMDQoNCiMgR2V0IHRoZSBhZ2Ugb2YgdGhlIGNsaWVudHMgaW4gdGhlIHllYXIgMTk5OSBhbmQgc2F2ZSBpdCBpbiBhIGNvbHVtbg0KZ2V0X2FnZSA8LSBmdW5jdGlvbihiaXJ0aF9kYXRlKSB7DQogIGJhc2VfeWVhciA8LSA5OQ0KICB5ZWFyIDwtIHN1YnN0cihiaXJ0aF9kYXRlLCAzLCA0KQ0KICByZXN1bHQgPC0gYmFzZV95ZWFyIC0gYXMuaW50ZWdlcih5ZWFyKQ0KICANCiAgcmV0dXJuKHJlc3VsdCkNCn0NCmNsaWVudHMgPC0gY2xpZW50cyAlPiUNCiAgIG11dGF0ZShhZ2UgPSBnZXRfYWdlKGJpcnRoX2RhdGUpKQ0KDQpjbGllbnRzJGJpcnRoX2RhdGUgPC0gTlVMTA0KDQpzdW0oaXMubmEoY2xpZW50cykpDQpgYGANCg0KQXVjaCBoaWVyIGdpYnQgZXMga2VpbmUgZmVobGVuZGVuIFdlcnRlLCB3ZWxjaGUgdW50ZXJzdWNodCB3ZXJkZW4gbcO8c3N0ZW4uDQoNCkp1Z2VuZGxpY2hlIHVuZCBQZXJzb25lbiwgd2VsY2hlIHfDpGhyZW5kIGRlcyBaZWl0cmF1bXMgZGVzIERhdGVuc2F0emVzIGVyc3QgZXJ3YWNoc2VuIHdvcmRlbiBzaW5kLCBzb2xsZW4gbmljaHQgaW4gZGllIEF1c3dlcnR1bmcgZWluZmxpZXNzZW4uDQpEYSBzaWNoIGRlciBEYXRlbnNhdHogw7xiZXIgZWluZW4gWmVpdHJhdW0gdm9uIHNlY2hzIEphaHJlbiBlcnN0cmVja3QsIHdlcmRlbiBhbGxlIENsaWVudHMgasO8bmdlciBhbHMgMjUgSmFocmUgaGVyYXVzZ2VmaWx0ZXJ0Lg0KDQpgYGB7cn0NCmNsaWVudHMgPC0gY2xpZW50cyAlPiUgZmlsdGVyKGFnZSA+PSAyNSkNCmBgYA0KDQojIyBEaXNwb3NpdGlvbnMNCg0KYGBge3J9DQpzYW1wbGVfbihkaXNwb3NpdGlvbnMsIDUpDQpgYGANCg0KRGllIFRhYmVsbGUgRGlzcG9zdGlvbnMgZW50aMOkbHQgZGllIERpc3Bvc2l0aW9uLUlELCBkaWUgQ2xpZW50LUlEICh3ZWxjaGUgYXVmIGRpZSBUYWJlbGxlIENsaWVudHMgdmVyd2Vpc3QpLCBkaWUgQWNjb3VudC1JRCAod2VsY2hlIGF1ZiBkaWUgVGFiZWxsZSBBY2NvdW50cyB2ZXJ3ZWlzdCkgdW5kIGRlbiBUeXAgZGVyIERpc3Bvc2l0aW9uLg0KRGlzcG9zaXRpb24gc3RlaHQgZGFiZWkgZsO8ciBkaWUgUmVjaHRlIGVpbmVzIEt1bmRlbiBmw7xyIGVpbiBnZXdpc3NlcyBLb250by4NCkhpZXIgc29sbGVuIG51ciBPd25lcnMgdmVyd2VuZGV0IHdlcmRlbiwgZGEgZGllIEFuYWx5c2UgbnVyIEVpZ2VudMO8bWVyIHZvbiBLb250ZW4gYmVoYW5kZWxuIHNvbGwuDQpEYSBkZXIgVHlwZSBkYW5uIGbDvHIgamVkZSBEaXNwb3N0aW9uIGRlciBnbGVpY2hlIGlzdCwgd2lyZCBkaWVzZSBWYXJpYWJsZSBlbnRmZXJudC4NCg0KYGBge3J9DQpkaXNwb3NpdGlvbnMgPC0gZGlzcG9zaXRpb25zICU+JSBmaWx0ZXIodHlwZSA9PSAnT1dORVInKQ0KZGlzcG9zaXRpb25zJHR5cGUgPC0gTlVMTA0KDQpzdW0oaXMubmEoZGlzcG9zaXRpb25zKSkNCmBgYA0KDQpBdWNoIGhpZXIgZ2lidCBlcyBrZWluZSBmZWhsZW5kZW4gV2VydGUsIHdlbGNoZSBnZW5hdWVyIHVudGVyc3VjaHQgd2VyZGVuIG3DvHNzdGVuLg0KDQojIyBEaXN0cmljdHMNCg0KYGBge3J9DQpzYW1wbGVfbihkaXN0cmljdHMsIDUpDQpgYGANCg0KRGllIFRhYmVsbGUgRGlzdHJpY3RzIGVudGjDpGx0IGRlbW9ncmFwaGlzY2hlIEluZm9ybWF0aW9uZW4gw7xiZXIgdmVyc2NoaWVkZW5lIEdlYmlldGUuDQpEaWUgU3BhbHRlbm5hbWVuIHNpbmQgaGllciBudXIgbnVtbWVyaWVydCB1bmQgbcO8c3NlbiByaWNodGlnIGJlbmFubnQgd2VyZGVuLg0KRGllcyBrw7ZubmVuIHdpciBhbmhhbmQgZGVyIERva3UgbWFjaGVuLg0KDQpgYGB7cn0NCmRpc3RyaWN0cyA8LSByZW5hbWUoZGlzdHJpY3RzLCBkaXN0cmljdF9pZCA9IEExLCBkaXN0cmljdF9uYW1lID0gQTIsIHJlZ2lvbiA9IEEzLCANCiAgICAgICAgICAgICAgICAgICBpbmhhYml0YW50cyA9IEE0LCBtdW5pY2lwYWxpdGllc19pbmhhYml0YW50c19zbWFsbGVyXzQ5OSA9IEE1LCANCiAgICAgICAgICAgICAgICAgICBtdW5pY2lwYWxpdGllc19pbmhhYml0YW50c181MDBfdG9fMTk5OSA9IEE2LCANCiAgICAgICAgICAgICAgICAgICBtdW5pY2lwYWxpdGllc19pbmhhYml0YW50c18yMDAwX3RvXzk5OTkgPSBBNywgDQogICAgICAgICAgICAgICAgICAgbXVuaWNpcGFsaXRpZXNfaW5oYWJpdGFudHNfbGFyZ2VyXzEwMDAwID0gQTgsIGNpdGllcyA9IEE5LCANCiAgICAgICAgICAgICAgICAgICB1cmJhbl9pbmhhYml0YW50c19yYXRpbyA9IEExMCwgYXZlcmFnZV9zYWxhcnkgPSBBMTEsDQogICAgICAgICAgICAgICAgICAgdW5lbXBsb3ltZW50X3JhdGVfOTUgPSBBMTIsIHVuZW1wbG95bWVudF9yYXRlXzk2ID0gQTEzLA0KICAgICAgICAgICAgICAgICAgIGVudHJlcHJlbmV1cnNfcGVyXzEwMDAgPSBBMTQsIGNyaW1lc185NSA9IEExNSwNCiAgICAgICAgICAgICAgICAgICBjcmltZXNfOTYgPSBBMTYpDQoNCnN1bShpcy5uYShkaXN0cmljdHMpKQ0KYGBgDQoNCkF1Y2ggaGllciBnaWJ0IGVzIGtlaW5lIGZlaGxlbmRlbiBXZXJ0ZS4NCg0KIyMgVHJhbnNhY3Rpb25zDQoNCmBgYHtyfQ0Kc2FtcGxlX24odHJhbnNhY3Rpb25zLCA1KQ0KYGBgDQoNCkRpZSBUcmFuc2FrdGlvbnMtVGFiZWxsZSBlbnRow6RsdCBkaWUgS29sb25uZW4gVHJhbnNha3Rpb25zLUlELCBBY2NvdW50LUlEICh3ZWxjaGUgYXVmIGRpZSBUYWJlbGxlIEFjY291bnRzIHZlcndlaXN0KSwgRGF0ZSAoZGFzIERhdHVtIGRlciBUcmFuc2FrdGlvbiksIFR5cGUgKGRlbiBUeXAgZGVyIFRyYW5zYWt0aW9uKSwgT3BlcmF0aW9uIHVuZCBrX3N5bWJvbCAod2VpdGVyZSBrYXRlZ29yaXNjaGUgSW5mb3JtYXRpb25lbiDDvGJlciBkaWUgVHJhbnNha3Rpb24pLCBBbW91bnQgKGRlciBhYnNvbHV0ZSBXZXJ0IGRlciBUcmFuc2FrdGlvbiksIEJhbGFuY2UgKGRlciBuZXVlIEtvbnRvc3RhbmQpIHVuZCBJbmZvcm1hdGlvbmVuIMO8YmVyIGRpZSBCYW5rIHVuZCBkZW4gQWNjb3VudC4NCg0KSW4gZGVuIFRyYW5zYWt0aW9uZW4gbXVzcyBkYXMgRGF0dW0gZ2Vtw6RzcyBGb3JtYXQgWVlNTUREIGtvbnZlcnRpZXJ0IHVuZCBkaWUgdmVyc2NoaWVkZW5lbiB0c2NoZWNoaXNjaGVuIEF1c2Ryw7xja2Ugw7xiZXJzZXR6dCB3ZXJkZW4uDQoiVllEQUoiIGhlaXNzdCDDvGJlcnNldHp0IEF1c2dhYmUsICJWWUJFUiIgRW50bmFobWUuDQpXaXIgw7xiZXJzZXR6ZW4gaGllciBiZWlkZSBCZWdyaWZmZSBtaXQgZGVtIFdlcnQgIndpdGhkcmF3YWwiLg0KDQpgYGB7cn0NCiMgQ2hhbmdlIGZvcm1hdHMNCnRyYW5zYWN0aW9ucyRkYXRlIDwtIGFzLkRhdGUoYXMuY2hhcmFjdGVyKHRyYW5zYWN0aW9ucyRkYXRlKSwgZm9ybWF0PSAiJXklbSVkIikNCnRyYW5zYWN0aW9ucyRhbW91bnQgPC0gYXMubnVtZXJpYyh0cmFuc2FjdGlvbnMkYW1vdW50KQ0KdHJhbnNhY3Rpb25zJGJhbGFuY2UgPC0gYXMubnVtZXJpYyh0cmFuc2FjdGlvbnMkYmFsYW5jZSkNCg0KIyBUcmFuc2xhdGUgdmFsdWVzDQp0cmFuc2FjdGlvbnMkdHlwZVt0cmFuc2FjdGlvbnMkdHlwZSA9PSAiUFJJSkVNIl0gPC0gImluY29tZSINCnRyYW5zYWN0aW9ucyR0eXBlW3RyYW5zYWN0aW9ucyR0eXBlID09ICJWWURBSiJdICA8LSAid2l0aGRyYXdhbCINCnRyYW5zYWN0aW9ucyR0eXBlW3RyYW5zYWN0aW9ucyR0eXBlID09ICJWWUJFUiJdICA8LSAid2l0aGRyYXdhbCINCg0KdHJhbnNhY3Rpb25zJG9wZXJhdGlvblt0cmFuc2FjdGlvbnMkb3BlcmF0aW9uID09ICJWS0xBRCJdICAgICAgICAgIDwtICJjYXNoIGNyZWRpdCINCnRyYW5zYWN0aW9ucyRvcGVyYXRpb25bdHJhbnNhY3Rpb25zJG9wZXJhdGlvbiA9PSAiUFJFVk9EIFogVUNUVSJdICA8LSAiY29sbGVjdGlvbiINCnRyYW5zYWN0aW9ucyRvcGVyYXRpb25bdHJhbnNhY3Rpb25zJG9wZXJhdGlvbiA9PSAiVllCRVIiXSAgICAgICAgICA8LSAiY2FzaCB3aXRoZHJhd2FsIg0KdHJhbnNhY3Rpb25zJG9wZXJhdGlvblt0cmFuc2FjdGlvbnMkb3BlcmF0aW9uID09ICJQUkVWT0QgTkEgVUNFVCJdIDwtICJyZW1pdHRhbmNlIg0KdHJhbnNhY3Rpb25zJG9wZXJhdGlvblt0cmFuc2FjdGlvbnMkb3BlcmF0aW9uID09ICJWWUJFUiBLQVJUT1UiXSAgIDwtICJjYXJkIHdpdGhkcmF3YWwiDQoNCnRyYW5zYWN0aW9ucyRrX3N5bWJvbFt0cmFuc2FjdGlvbnMka19zeW1ib2wgPT0gIkRVQ0hPRCJdIDwtICJwZW5zaW9uIg0KdHJhbnNhY3Rpb25zJGtfc3ltYm9sW3RyYW5zYWN0aW9ucyRrX3N5bWJvbCA9PSAiVVJPSyJdIDwtICJpbnRlcmVzdCINCnRyYW5zYWN0aW9ucyRrX3N5bWJvbFt0cmFuc2FjdGlvbnMka19zeW1ib2wgPT0gIlNJUE8iXSA8LSAiaG91c2Vob2xkIg0KdHJhbnNhY3Rpb25zJGtfc3ltYm9sW3RyYW5zYWN0aW9ucyRrX3N5bWJvbCA9PSAiU0xVWkJZIl0gPC0gInBheW1lbnQgc3RhdGVtZW50Ig0KdHJhbnNhY3Rpb25zJGtfc3ltYm9sW3RyYW5zYWN0aW9ucyRrX3N5bWJvbCA9PSAiUE9KSVNUTkUiXSA8LSAiaW5zdXJhbmNlIg0KdHJhbnNhY3Rpb25zJGtfc3ltYm9sW3RyYW5zYWN0aW9ucyRrX3N5bWJvbCA9PSAiU0FOS0MuIFVST0siXSAgPC0gIm5lZ19pbnRlcmVzdCINCnRyYW5zYWN0aW9ucyRrX3N5bWJvbFt0cmFuc2FjdGlvbnMka19zeW1ib2wgPT0gIlVWRVIiXSAgPC0gImxvYW5fcGF5Ig0KDQpzdW0oaXMubmEodHJhbnNhY3Rpb25zKSkNCmBgYA0KDQpJbiBkaWVzZXIgU3BhbHRlIGdpYnQgZXMgZWluZSBncm9zc2UgQW56YWhsIGZlaGxlbmRlciBXZXJ0ZS4NCkJlcmVpdHMgaW0gU2FtcGxlIGlzdCBlcnNpY2h0bGljaCwgZGFzcyBiZWkgZGVuIEtvbG9ubmVuIGJhbmssIGtfc3ltYm9sIHVuZCBhY2NvdW50IGZlaGxlbmRlIFdlcnRlIGFscyBOQSBvZGVyIGFscyBsZWVyZXIgc3RyaW5nIHZvcmtvbW1lbi4NCkRlciBBbnRlaWwgZmVobGVuZGVyIFdlcnRlIHNvbGwgYWxzIG7DpGNoc3RlcyB1bnRlcnN1Y2h0IHdlcmRlbi4NCg0KYGBge3J9DQptaXNzaW5nX2JhbmtfcGVyY2VudGFnZSA9IHJvdW5kKHN1bSh0cmFuc2FjdGlvbnMkYmFuayA9PSAnJykgKiAxMDAgLyBkaW0odHJhbnNhY3Rpb25zKVsxXSwgMikNCm1pc3Npbmdfa19zeW1ib2xfcGVyY2VudGFnZSA9IHJvdW5kKHN1bSh0cmFuc2FjdGlvbnMka19zeW1ib2wgPT0gJycpICogMTAwIC8gZGltKHRyYW5zYWN0aW9ucylbMV0sIDIpDQptaXNzaW5nX2FjY291bnRfcGVyY2VudGFnZSA9IHJvdW5kKHN1bShpcy5uYSh0cmFuc2FjdGlvbnMkYWNjb3VudCkpICogMTAwIC8gZGltKHRyYW5zYWN0aW9ucylbMV0sIDIpDQoNCnByaW50KHBhc3RlKCJJbiBkZXIgS29sb25uZSBCYW5rIGZlaGxlbiIsIG1pc3NpbmdfYmFua19wZXJjZW50YWdlLCAiJSBkZXIgV2VydGUuIikpDQpwcmludChwYXN0ZSgiSW4gZGVyIEtvbG9ubmUga19zeW1ib2wgZmVobGVuIiwgbWlzc2luZ19rX3N5bWJvbF9wZXJjZW50YWdlLCAiJSBkZXIgV2VydGUuIikpDQpwcmludChwYXN0ZSgiSW4gZGVyIEtvbG9ubmUgQWNjb3VudCBmZWhsZW4iLCBtaXNzaW5nX2FjY291bnRfcGVyY2VudGFnZSwgIiUgZGVyIFdlcnRlLiIpKQ0KYGBgDQoNCkJlaSBkZW4gS29sb25uZW4gYmFuayB1bmQgYWNjb3VudCBmZWhsZW4gZmFzdCBkcmVpIFZpZXJ0ZWwgZGVyIFdlcnRlLCBiZWkga19zeW1ib2wgYmVpbmFoZSBkaWUgSMOkbGZ0ZS4NCkRhaGVyIGhhYmVuIHdpciB1bnMgZW50c2NoaWVkZW4sIGRpZXNlIEtvbG9ubmVuIHZvbSBEYXRhZnJhbWUgenUgZW50ZmVybmVuLg0KDQpgYGB7cn0NCnRyYW5zYWN0aW9ucyRiYW5rIDwtIE5VTEwNCnRyYW5zYWN0aW9ucyRrX3N5bWJvbCA8LSBOVUxMDQp0cmFuc2FjdGlvbnMkYWNjb3VudCA8LSBOVUxMDQpgYGANCg0KSmV0enQgc2NoYXVlbiB3aXIgdW5zIG5vY2htYWxzIGRpZSBmZWhsZW5kZW4gV2VydGUgYW4uDQoNCmBgYHtyfQ0Kc3VtKGlzLm5hKHRyYW5zYWN0aW9ucykpDQpgYGANCg0KRHVyY2ggZGFzIEVudGZlcm5lbiBkZXIgZHJlaSBTcGFsdGVuIGtvbm50ZW4gYWxsZSBmZWhsZW5kZW4gV2VydGUgZW50ZmVybnQgd2VyZGVuLg0KTnVuIGJlc3RlaHQgYWJlciBub2NoIGRhcyBQcm9ibGVtLCBkYXNzIGRlciBhbmdlZ2ViZW5lIEJldHJhZyBkZXIgVHJhbnNha3Rpb25lbiBpbW1lciBwb3NpdGl2IGlzdCwgYXVjaCB3ZW5uIGRhcyBWZXJtw7ZnZW4gc2lua3QuDQpXaXIgZ2VoZW4gYWxzbyBkYXZvbiBhdXMsIGRhc3MgaW1tZXIgZGVyIGFic29sdXRlIFdlcnQgaW4gZGllc2VyZSBLb2xvbm5lIGVyZmFzc3QgaXN0Lg0KRGllcyBtw7xzc2VuIHdpciBub2NoIGJlcmVpbmlnZW4sIHNvIGRhc3MgZGVyIEJldHJhZyBhdWNoIG5lZ2F0aXYgc2VpbiBrYW5uLg0KDQpHbMO8Y2tsaWNoZXJ3ZWlzZSBnaWJ0IGVzIGVpbmUgd2VpdGVyZSBJbmZvcm1hdGlvbiwgd2VsY2hlIHVucyBiZWkgZGllc2VtIFByb2JsZW0gd2VpdGVyaGlsZnQ6IERpZSBWYXJpYWJsZSAidHlwZSIuDQoNCmBgYHtyfQ0KdW5pcXVlKHRyYW5zYWN0aW9ucyR0eXBlKQ0KYGBgDQoNCkVzIGdpYnQgbnVyIHp3ZWkgVHJhbnNha3Rpb25zdHlwZW46IGluY29tZSB1bmQgd2l0aGRyYXdhbC4NCkRpZXNlIGdlYmVuIGFuLCBvYiBHZWxkIGF1ZiBkYXMgS29udG8gZmxpZXNzdCBvZGVyIGVudG5vbW1lbiB3aXJkLg0KQmVpIFRyYW5zYWt0aW9uZW4gbWl0IFR5cCAid2l0aGRyYXdhbCIga2FubiBhbHNvIGRlciBCZXRyYWcgbmVnaWVydCB3ZXJkZW4uDQpXaXIgZsO8Z2VuIGRpZSBuZXVlbiBWYXJpYWJlbG4gImRpZmZlcmVuY2UiIHVuZCAicHJldl9iYWxhbmNlIiBoaW56dS4NClNpZSBiZXNjaHJlaWJlbiBkZW4gQmV0cmFnIG1pdCBlbnRzcHJlY2hlbmRlbSBWb3J6ZWljaGVuIHVuZCBkZW4gS29udG9zdGFuZCB2b3IgZGVyIFRyYW5zYWt0aW9uLg0KDQpgYGB7cn0NCmRmIDwtIHRyYW5zYWN0aW9ucw0KDQojIEtvbnZlcnRpZXJlbiBTaWUgZGFzICdkYXRlJy1GZWxkIGluIGVpbiBEYXR1bQ0KI2RmJGRhdGUgPC0gYXMuRGF0ZShkZiRkYXRlKQ0KDQojIFNvcnRpZXJlbiBTaWUgZGFzIERhdGFmcmFtZSBuYWNoIE51dHplciB1bmQgRGF0dW0uIEJlaSBnbGVpY2hlbSBEYXR1bSB3aXJkIG5hY2ggdHJhbmFjdGlvbl9pZCBzb3J0aWVydC4gDQpkZiA8LSBkZltvcmRlcihkZiRhY2NvdW50X2lkLCBkZiRkYXRlLCBkZiR0cmFuc19pZCksIF0NCg0KIyBHcnVwcGllcmVuIFNpZSBkYXMgRGF0YWZyYW1lIG5hY2ggTnV0emVyDQpkZiA8LSBncm91cF9ieShkZiwgYWNjb3VudF9pZCkNCg0KIyBJdGVyaWVyZW4gU2llIMO8YmVyIGplZGVuIE51dHplciB1bmQgYmVhcmJlaXRlbiBTaWUgZGllIFRyYW5zYWt0aW9uZW4NCmRmIDwtIGRmICU+JSANCiAgc3VtbWFyaXplKHRyYW5zYWN0aW9ucyA9IHsNCiAgICANCiAgICAjIERpZSBEaWZmZXJlbnQgZGVyIFRyYW5zYWt0aW9uIHp1ciBWb3JoZXJpZ2VuIHdpcmQgbWl0dGVscyBUeXAgYXVzZ2VsZXNlbg0KICAgIGRpZmZlcmVuY2UgPC0gaWZlbHNlKHR5cGUgPT0gIndpdGhkcmF3YWwiLCBhbW91bnQsIGFtb3VudCAqIC0xKQ0KICAgIA0KICAgICMgQmFsYW5jZSBpc3QgZGVyIEtvbnRvc3RhbmQgbmFjaCBkZXIgVHJhbnNha3Rpb24sIG1pdHRlbHMgZGlmZmVyZW5jZSB3aXJkIGRlciBLb250b3N0YW5kIHZvciBUcmFuc2FrdGlvbiBlcm1pdHRlbHQuDQogICAgcHJldl9iYWxhbmNlIDwtIGJhbGFuY2UgLSBkaWZmZXJlbmNlDQoNCiAgICAjIEVyc3RlbGxlbiBTaWUgZGFzIERhdGFmcmFtZSBtaXQgZGVuIFRyYW5zYWt0aW9uZW4gZsO8ciBqZWRlbiBOdXR6ZXINCiAgICB0cmFuc2FjdGlvbnNfZGYgPC0gZGF0YS5mcmFtZShhbW91bnQsIGRhdGUsIGJhbGFuY2UsIHByZXZfYmFsYW5jZSwgZGlmZmVyZW5jZSkNCiAgICB0cmFuc2FjdGlvbnNfZGYNCiAgfSkgJT4lDQogIHVuZ3JvdXAoKQ0KDQp0cmFuc2FjdGlvbnMgPC0gdW5uZXN0KGRmLCB0cmFuc2FjdGlvbnMpDQoNCnNhbXBsZV9uKHRyYW5zYWN0aW9ucywgNSkNCmBgYA0KDQojIyBPcmRlcnMNCg0KRGllIFRhYmVsbGUgT3JkZXJzIGVudGjDpGx0IEluZm9ybWF0aW9uZW4gw7xiZXIgZWluZW4gWmFobHVuZ3NhdWZ0cmFnLg0KU2llIGVudGjDpGxsdCBkaWUgS29sb25uZW4gT3JkZXItSUQsIEFjY291bnQtSUQgKHdlbGNoZSBhdWYgZGllIFRhYmVsbGUgQWNjb3VudHMgdmVyd2Vpc3QpLCBCYW5rLVRvICh3ZWxjaGUgYmVzY2hyZWlidCwgYW4gd2VsY2hlIEJhbmsgZGllIFphaGx1bmcgZ2VodCksIEFjY291bnQtVG8gKHdlbGNoZSBhdWYgZGllIFRhYmVsbGUgQWNjb3VudHMgdmVyd2Vpc3QgdW5kIGRlbiBFbXBmw6RuZ2VyIGRlciBaYWhsdW5nIGFuZ2lidCksIEFtb3VudCAoZGVuIEJldHJhZyBkZXIgWmFobHVuZykgdW5kIGtfc3ltYm9sIChkZW4gVHlwIGRlciBUcmFuc2FrdGlvbikuDQpEaWUgV2VydGUgaW4gZGVyIFNwYWx0ZSBrX3N5bWJvbCBzb2xsZW4gd2llZGVyIMO8YmVyc2V0enQgd2VyZGVuLg0KRmVobGVuZGUgV2VydGUgc29sbGVuIGhpZXIgbWl0ICJ1bmtub3duIiBlcnNldHp0IHdlcmRlbi4NCg0KYGBge3J9DQpzYW1wbGVfbihvcmRlcnMsIDUpDQpgYGANCg0KYGBge3J9DQojIFJlbmFtZSBjb2x1bW4ga19zeW1ib2wNCm9yZGVycyA8LSByZW5hbWUob3JkZXJzLCAiY2hhcmFjdGVyaXphdGlvbiIgPSAia19zeW1ib2wiKSANCg0KIyBUcmFuc2xhdGUgY29sdW1uIGNoYXJhY3Rlcml6YXRpb24NCm9yZGVycyRjaGFyYWN0ZXJpemF0aW9uW29yZGVycyRjaGFyYWN0ZXJpemF0aW9uID09ICJTSVBPIl0gICAgIDwtICJob3VzZWhvbGQiDQpvcmRlcnMkY2hhcmFjdGVyaXphdGlvbltvcmRlcnMkY2hhcmFjdGVyaXphdGlvbiA9PSAiVVZFUiJdICAgICA8LSAibG9hbiINCm9yZGVycyRjaGFyYWN0ZXJpemF0aW9uW29yZGVycyRjaGFyYWN0ZXJpemF0aW9uID09ICJQT0pJU1RORSJdIDwtICJpbnN1cmFuY2UiDQpvcmRlcnMkY2hhcmFjdGVyaXphdGlvbltvcmRlcnMkY2hhcmFjdGVyaXphdGlvbiA9PSAiTEVBU0lORyJdICA8LSAibGVhc2luZyINCm9yZGVycyRjaGFyYWN0ZXJpemF0aW9uW29yZGVycyRjaGFyYWN0ZXJpemF0aW9uID09ICIgIl0gIDwtICJ1bmtub3duIg0Kb3JkZXJzJGNoYXJhY3Rlcml6YXRpb25bb3JkZXJzJGNoYXJhY3Rlcml6YXRpb24gPT0gIiJdICA8LSAidW5rbm93biINCg0Kb3JkZXJzJGFtb3VudCA8LSBhcy5udW1lcmljKG9yZGVycyRhbW91bnQpDQoNCnN1bShpcy5uYShvcmRlcnMpKQ0KYGBgDQoNCkF1Y2ggaGllciBnaWJ0IGVzIGtlaW5lIGZlaGxlbmRlbiBXZXJ0ZS4NCg0KIyMgTG9hbnMNCg0KYGBge3J9DQpzYW1wbGVfbihsb2FucywgNSkNCmBgYA0KDQpEaWUgVGFiZWxsZSBMb2FucyBlbnRow6RsdCBJbmZvcm1hdGlvbmVuIMO8YmVyIERhcmxlaGVuIGRlciB2ZXJzY2hpZWRlbmVuIEFjY291bnRzLg0KRGFiZWkgc3RlaGVuIHVucyBJbmZvcm1hdGlvbmVuIHdpZSBkYXMgRGF0dW0sIGRpZSBIw7ZoZSwgZGllIERhdWVyLCBkZXIgQmV0cmFnIGRlciB6YWhsdW5nZW4gdW5kIGRlbiBTdGF0dXMgZGVyIERhcmxlaGVuIHp1ciBWZXJmw7xndW5nLg0KQXVjaCBoaWVyIHNvbGwgd2llZGVyIGRhcyBEYXR1bXNmb3JtYXQgZ2XDpG5kZXJ0IHVuZCBkZXIgU3RhdHVzIGRlciBEYXJsZWhlbiBpbiBlaW5lbiBiZXNzZXIgbGVzYmFyZW4gV2VydCB1bWdld2FuZGVsdCB3ZXJkZW4uDQpEaWUgSW5mb3JtYXRpb25lbiDDvGJlciBkaWUgdmVyc2NoaWVkZW5lbiBTdGF0dXMgc2luZCBkZXIgRG9rdW1lbnRhdGlvbiBkZXMgRGF0ZW5zYXR6ZXMgenUgZW50bmVobWVuLg0KDQpgYGB7cn0NCmxvYW5zJGRhdGUgPC0gYXMuRGF0ZShhcy5jaGFyYWN0ZXIobG9hbnMkZGF0ZSksIGZvcm1hdD0gIiV5JW0lZCIpDQpsb2FucyRwYXltZW50cyA8LSBhcy5udW1lcmljKGxvYW5zJHBheW1lbnRzKQ0KbG9hbnMkYW1vdW50IDwtIGFzLm51bWVyaWMobG9hbnMkYW1vdW50KQ0KDQojIE1ha2UgY29sdW1uIHN0YXR1cyBodW1hbiByZWFkYWJsZQ0KbG9hbnMkc3RhdHVzW2xvYW5zJHN0YXR1cyA9PSAiQSJdIDwtICJmaW5pc2hlZF9wYXllZCINCmxvYW5zJHN0YXR1c1tsb2FucyRzdGF0dXMgPT0gIkIiXSA8LSAiZmluaXNoZWRfbm90X3BheWVkIg0KbG9hbnMkc3RhdHVzW2xvYW5zJHN0YXR1cyA9PSAiQyJdIDwtICJydW5uaW5nX29rIg0KbG9hbnMkc3RhdHVzW2xvYW5zJHN0YXR1cyA9PSAiRCJdIDwtICJydW5uaW5nX2luX2RlYnQiDQoNCnN1bShpcy5uYShsb2FucykpDQpgYGANCg0KQXVjaCBoaWVyIGdpYnQgZXMga2VpbmUgZmVobGVuZGVuIFdlcnRlLg0KDQojIFp1c2FtbWVuZsO8Z2VuIGRlciBEYXRhZnJhbWVzDQoNCkFscyBOw6RjaHN0ZXMgZmFzc2VuIHdpciBkaWUgRGF0YWZyYW1lcyB6dSBlaW5lbSBncm9zc2VuIERhdGFmcmFtZSB6dXNhbW1lbiwgZGFtaXQgd2lyIHNww6R0ZXIgTW9kZWxsZSBkYXJhdWYgdHJhaW5pZXJlbiBrw7ZubmVuLg0KRGFiZWkgbcO8c3NlbiB3aXIgw7xiZXJwcsO8ZmVuLCBvYiBlcyBzaWNoIGJlaSBkZW4gVmVyYmluZHVuZ2VuIGRlciB2ZXJzY2hpZWRlbmVuIFRhYmVsbGVuIHVtIG4genUgbiBCZXppZWh1bmdlbiBoYW5kZWx0Lg0KV2lyIHN0YXJ0ZW4gbWl0IGRlciBUYWJlbGxlIENsaWVudHMgdW5kIGbDvGdlbiBpbW1lciBtZWhyIFRhYmVsbGVuIGhpbnp1Lg0KDQojIyBDbGllbnRzIHVuZCBEaXNwb3NpdGlvbnMNCg0KYGBge3J9DQpwcmludChwYXN0ZSgiQW56YWhsIEt1bmRlbiBpbiBDbGllbnRzOiIsIGRpbShjbGllbnRzKVsxXSkpDQpwcmludChwYXN0ZSgiQW56YWhsIERpc3Bvc2l0aW9uczoiLCBkaW0oZGlzcG9zaXRpb25zKVsxXSkpDQpgYGANCg0KRXMgZ2lidCBhbHNvIHdlbmlnZXIgRGlzcG9zaXRpb25zIGFscyBDbGllbnRzLg0KQWJlciBnaWJ0IGVzIENsaWVudHMgbWl0IG1laHJlcmVuIERpc3Bvc2l0aW9ucz8NCg0KYGBge3J9DQpkaW0oZGlzcG9zaXRpb25zKVsxXSAtIGxlbmd0aCh1bmlxdWUoZGlzcG9zaXRpb25zJGNsaWVudF9pZCkpDQpgYGANCg0KTmVpbiwgZXMgZ2lidCBrZWluZSBDbGllbnRzIG1pdCBtZWhyZXJlbiBEaXNwb3NpdGlvbmVuLg0KV2lyIGvDtm5uZW4gYWxzbyBkaWUgYmVpZGVuIERhdGFmcmFtZXMgYW5oYW5kIGVpbmVzIElubmVyLUpvaW5zIG1pdGVpbmFuZGVyIHZlcmJpbmRlbiwgdmVybGllcmVuIGRhYmVpIGFiZXIgbWVociBhbHMgNjAwIEt1bmRlbi4NCkRpZXNlIEt1bmRlbiBzaW5kIGbDvHIgdW5zIHNvd2llc28gaXJyZWxldmFudCwgZGEgc2llIGtlaW5lIEtvbnRlbiBiZXNpdHplbi4NCg0KYGBge3J9DQpmdWxsIDwtIGlubmVyX2pvaW4oY2xpZW50cywgZGlzcG9zaXRpb25zLCBieSA9ICJjbGllbnRfaWQiLCBzdWZmaXggPSBjKCIuY2xpZW50IiwgIi5kaXNwb3NpdGlvbnMiKSkNCnByaW50KHBhc3RlKCJBbnphaGwgS3VuZGVuIG1pdCBEaXNwb3NpdGlvbmVuOiIsIGRpbShmdWxsKVsxXSkpDQpgYGANCg0KRXMgYmxlaWJlbiBhbHNvIDM4NTggS3VuZGVuLg0KDQojIyBBY2NvdW50cw0KDQpgYGB7cn0NCnByaW50KHBhc3RlKCJBbnphaGwgQWNjb3VudHM6IiwgZGltKGFjY291bnRzKVsxXSkpDQpgYGANCg0KRXMgZ2lidCBhbHNvIGdsZWljaCB2aWVsZSBBY2NvdW50cyB3aWUgRGlzcG9zaXRpb25lbi4NCkF1Y2ggaGllciBzb2xsIHdpZWRlciDDvGJlcnByw7xmdCB3ZXJkZW4sIG9iIGplZGVyIEFjY291bnQgZ2VuYXUgZWluZW4gT3duZXIgaGF0Lg0KDQpgYGB7cn0NCiMgQ291bnQgdGhlIG51bWJlciBvZiBkaXNwb3NpdGlvbnMgcGVyIGNsaWVudA0KYWNjX2NvdW50cyA8LSBjb3VudChhY2NvdW50cywgImNsaWVudF9pZCIpDQoNCiMgQ3JlYXRlIGEgc3VtbWFyeSBvZiB0aGUgY291bnRzDQpzdW1tYXJ5IDwtIHRhYmxlKGFjY19jb3VudHMkbikNCg0Kc3VtbWFyeQ0KYGBgDQoNCkplZGVyIEFjY291bnQgaGF0IGdlbmF1IGVpbmVuIE93bmVyLg0KRGFzIERhdGFmcmFtZSBBY2NvdW50cyBrYW5uIGFsc28genUgdW5zZXJlbSBncm9zc2VuIERhdGFmcmFtZSBoaW56dWdlZsO8Z3Qgd2VyZGVuLg0KDQpgYGB7cn0NCmZ1bGwgPC0gaW5uZXJfam9pbihmdWxsLCBhY2NvdW50cywgYnkgPSAiYWNjb3VudF9pZCIsIHN1ZmZpeCA9IGMoIiIsICIuYWNjb3VudHMiKSkNCmRpbShmdWxsKVsxXQ0KYGBgDQoNClVuc2VyIERhdGFmcmFtZSBoYXQgaW1tZXIgbm9jaCBlaW5lIEzDpG5nZSB2b24gMzg1OCBaZWlsZW4gb2RlciBLdW5kZW4uDQoNCiMjIExvYW5zDQoNCmBgYHtyfQ0KcHJpbnQocGFzdGUoIkFuemFobCBMb2FuczoiLCBkaW0obG9hbnMpWzFdKSkNCmBgYA0KDQpFcyBnaWJ0IG51ciA2ODIgTG9hbnMuDQpEYXMgYmVkZXV0ZXQsIGRhc3MgbmljaHQgamVkZXIgS3VuZGUgZWluIERhcmxlaGVuIGhhdCwgd2FzIFNpbm4gZXJnaWJ0Lg0KV2VpdGVyIHNvbGwgbm9jaCDDvGJlcnByw7xmdCB3ZXJkZW4sIG9iIGVzIEt1bmRlbiBnaWJ0LCB3ZWxjaGUgbWVocmVyZSBEYXJsZWhlbiBoYWJlbi4NCg0KYGBge3J9DQpkaW0obG9hbnMpWzFdIC0gbGVuZ3RoKHVuaXF1ZShsb2FucyRhY2NvdW50X2lkKSkNCmBgYA0KDQpFcyBnaWJ0IGFsc28ga2VpbmUgS3VuZGVuLCB3ZWxjaGUgbWVocmVyZSBEYXJsZWhlbiBiZXpvZ2VuIGhhYmVuLg0KRGllIExvYW5zIHNvbGxlbiBhbiBkYXMgZ2VzYW10ZSBEYXRhZnJhbWUgbWl0dGVscyBMZWZ0IEpvaW4gYWdlaMOkbmd0IHdlcmRlbi4NClNvIGdpYnQgZXMgS3VuZGVuLCB3ZWxjaGUga2VpbmUgTG9hbnMgaGFiZW4gdW5kIGRpZSBWYXJpYWJlbG4gZGVuIFdlcnQgTkEgaGFiZW4uDQpCZWkgZGllc2VuIHNvbGxlbiBkaWUgZmVobGVuZGVuIG51bWVyaXNjaGVuIFdlcnRlIGR1cmNoIDAgZXJzZXR6dCB1bmQgZGVyIFN0YXR1cyBhdWYgIm5vX2xvYW4iIGdlw6RuZGVydCB3ZXJkZW4uDQpEYXMgRGF0dW0gZGVzIExvYW5zIGVudGZlcm5lbiB3aXIuDQoNCmBgYHtyfQ0KZnVsbCA8LSBsZWZ0X2pvaW4oZnVsbCwgbG9hbnMsIGJ5ID0gImFjY291bnRfaWQiLCBzdWZmaXggPSBjKCIiLCAiLmxvYW5zIikpDQpmdWxsJGFtb3VudCA8LSBpZmVsc2UoaXMubmEoZnVsbCRhbW91bnQpLCAwLCBmdWxsJGFtb3VudCkNCmZ1bGwkZHVyYXRpb24gPC0gaWZlbHNlKGlzLm5hKGZ1bGwkZHVyYXRpb24pLCAwLCBmdWxsJGR1cmF0aW9uKQ0KZnVsbCRwYXltZW50cyA8LSBpZmVsc2UoaXMubmEoZnVsbCRwYXltZW50cyksIDAsIGZ1bGwkcGF5bWVudHMpDQpmdWxsJHN0YXR1cyA8LSBpZmVsc2UoaXMubmEoZnVsbCRzdGF0dXMpLCAibm9fbG9hbiIsIGZ1bGwkc3RhdHVzKQ0KZnVsbCRkYXRlLmxvYW5zIDwtIE5VTEwNCmBgYA0KDQojIyBDYXJkcw0KDQpgYGB7cn0NCnByaW50KHBhc3RlKCJBbnphaGwgQ2FyZHM6IiwgZGltKGNhcmRzKVsxXSkpDQpgYGANCg0KYGBge3J9DQpsZW5ndGgodW5pcXVlKGNhcmRzJGRpc3BfaWQpKQ0KYGBgDQoNCkVzIGdpYnQgNzQ3IEt1bmRlbiBtaXQgS2FydGVuLCBrZWluIEt1bmRlIGhhdCBtZWhyZXJlIEthcnRlbi4NCkVzIG1hY2h0IHdpZWRlciBTaW5uLCBkYXNzIG5pY2h0IGFsbGUgS3VuZGVuIGVpbmUgS2FydGUgaGFiZS4NCkRlciBLYXJ0ZW50eXAgaXN0IGltbWVyIGdsZWljaC4NCg0KRGFoZXIgd2lyZCBpbiBGb2xnZSBkZXIgVHlwIGRlciBLYXJ0ZSBkdXJjaCBkZW4gYm9vbHNjaGVuIFdlcnQgImhhc19jYXJkIiBlcnNldHp0Lg0KRGllcyB3aXJkIGF1Y2ggdW5zZXJlIFppZWx2YXJpYWJlbCBpbiBkZW4gTW9kZWxsZW4gc2Vpbi4NCkF1Y2ggZGllIENhcmQtSUQga2FubiBlbnRmZXJudCB3ZXJkZW4uDQoNCmBgYHtyfQ0KZnVsbCA8LSBsZWZ0X2pvaW4oZnVsbCwgY2FyZHMsIGJ5ID0gImRpc3BfaWQiLCBzdWZmaXggPSBjKCIiLCAiLmNhcmRzIikpDQpgYGANCg0KYGBge3J9DQpoYXNfY2FyZF9mdW5jdGlvbiA8LSBmdW5jdGlvbih4KSB7DQogIGlmIChpcy5uYSh4KSkgew0KICAgIHJldHVybihGQUxTRSkNCiAgfSBlbHNlIHsNCiAgICByZXR1cm4oVFJVRSkNCiAgfQ0KfQ0KDQpmdWxsJGhhc19jYXJkIDwtIHNhcHBseShmdWxsWywgImNhcmRfaWQiXSwgaGFzX2NhcmRfZnVuY3Rpb24pDQpmdWxsIDwtIGZ1bGwgJT4lIHNlbGVjdCgtY2FyZF9pZCwgLXR5cGUpDQpgYGANCg0KIyMgT3JkZXJzDQoNCmBgYHtyfQ0KcHJpbnQocGFzdGUoIkFuemFobCBPcmRlcnM6IiwgZGltKG9yZGVycylbMV0pKQ0KYGBgDQoNCmBgYHtyfQ0KbGVuZ3RoKHVuaXF1ZShvcmRlcnMkYWNjb3VudF9pZCkpDQpgYGANCg0KRXMgZ2lidCA2NDcxIE9yZGVycyBmw7xyIDM3NTggS3VuZGVuLg0KRGFzIGJlZGV1dGV0LCBkYXNzIGVzIEt1bmRlbiBnaWJ0LCB3ZWxjaGUgbWVocmVyZSBPcmRlcnMgaGFiZW4uDQpEaWVzZSBJbmZvcm1hdGlvbmVuIG3DvHNzZW4gd2lyIHp1IGVpbmVyIFJvdyB6dXNhbW1lbmZhc3Nlbi4NCg0KRGFiZWkgaGFiZW4gd2lyIHVucyBkYWbDvHIgZW50c2NoaWVkZW4sIGRpZSBWYXJpYWJlbG4gYWNjb3VudF90byB1bmQgYW1vdW50IG5pY2h0IGluIGRlbiBHZXNhbXRkYXRlbnNhdHogZWluZmxpZXNzZW4genUgbGFzc2VuLg0KRGVyIGFtb3VudCBpc3QgYmVyZWl0cyBpbiBkZW4gVHJhbnNha3Rpb25lbiBpbmJlZ3JpZmZlbi4NCkFuIHdlbiBkaWUgWmFobHVuZ2VuIGdlaGVuLCBzb2xsdGUga2VpbmVuIEVpbmZsdXNzIGF1ZiB1bnNlciBNb2RlbGwgaGFiZW4uDQoNCkFsc28gYmxlaWJlbiB1bnMgbm9jaCBkaWUgVmFyaWFiZWxuICJjaGFyYWN0ZXJpemF0aW9uIiB1bmQgImJhbmtfdG8iLg0KWnVlcnN0IHNjaGF1ZW4gd2lyIHVucyBhbiwgd2llIHZpZWxlIHZlcnNjaGllZGVuZSBXZXJ0ZSBkaWVzZSBiZWlkZW4gVmFyaWFiZWxuIGFubmVobWVuIGvDtm5uZW4uDQoNCmBgYHtyfQ0KdW5pcXVlKG9yZGVycyRjaGFyYWN0ZXJpemF0aW9uKQ0KbGVuZ3RoKHVuaXF1ZShvcmRlcnMkY2hhcmFjdGVyaXphdGlvbikpDQpgYGANCg0KYGBge3J9DQp1bmlxdWUob3JkZXJzJGJhbmtfdG8pDQpsZW5ndGgodW5pcXVlKG9yZGVycyRiYW5rX3RvKSkNCmBgYA0KDQpCZWkgZGllc2VuIGJlaWRlbiBWYXJpYWJlbG4gZ2lidCBlcyBudXIgNSBiencuDQoxMyB2ZXJzY2hpZWRlbmUgQXVzcHLDpGd1bmdlbi4NCldpciBrw7ZubmVuIGFsc28gZGllc2UgV2VydGUgd2llIGZvbGd0IGFuIGRlbiBncm9zc2VuIERhdGVuc2F0eiBhbmbDvGdlbjoNCg0KRsO8ciBqZWRlIEF1c3Byw6RndW5nIGRlciBTcGFsdGUgZ2lidCBlcyBlaW5lIG5ldWUgS29sb25uZS4NCkRpZXNlIEtvbG9ubmUgbmltbXQgZGVuIFdlcnQgZGVyIEFuemFobCBkZXIgT3JkZXJzIG1pdCBkaWVzZXIgImNoYXJhY3Rlcml6YXRpb24iIGJ6dy4NCiJiYW5rX3RvIiBhbi4NCg0KYGBge3J9DQpjaGFyYWN0ZXJpemF0aW9ucyA8LSBvcmRlcnMgJT4lDQogIGdyb3VwX2J5KGFjY291bnRfaWQsIGNoYXJhY3Rlcml6YXRpb24pICU+JQ0KICBjb3VudCgpDQoNCmNoYXJhY3Rlcml6YXRpb25zX3dpZGUgPC0gY2hhcmFjdGVyaXphdGlvbnMgJT4lDQogIHNwcmVhZChrZXkgPSBjaGFyYWN0ZXJpemF0aW9uLCB2YWx1ZSA9IG4pDQoNCmJhbmtfdG9zIDwtIG9yZGVycyAlPiUNCiAgZ3JvdXBfYnkoYWNjb3VudF9pZCwgYmFua190bykgJT4lDQogIGNvdW50KCkNCg0KYmFua190b3Nfd2lkZSA8LSBiYW5rX3RvcyAlPiUNCiAgc3ByZWFkKGtleSA9IGJhbmtfdG8sIHZhbHVlID0gbikNCg0Kb3JkZXJzIDwtIG1lcmdlKGNoYXJhY3Rlcml6YXRpb25zX3dpZGUsIGJhbmtfdG9zX3dpZGUsIGJ5ID0gImFjY291bnRfaWQiKQ0KDQpvcmRlcnNbaXMubmEob3JkZXJzKV0gPC0gMA0KYGBgDQoNCmBgYHtyfQ0KZnVsbCA8LSBsZWZ0X2pvaW4oZnVsbCwgb3JkZXJzLCBieSA9ICJhY2NvdW50X2lkIikNCmBgYA0KDQpEaWUgZmVobGVuZGVuIFdlcnRlIGluIGRpZXNlbiBLb2xvbm5lbiBtw7xzc2VuIGpldHp0IG5vY2ggbWl0IDAgZXJzZXR6dCB3ZXJkZW4uDQpEZXIgRWluZmFjaGhlaXQgaGFsYmVyIHNldHplbiB3aXIgZGllc2UgV2VydGUgaGFyZGNvZGVkLg0KDQpgYGB7cn0NCmZ1bGwkaG91c2Vob2xkW2lzLm5hKGZ1bGwkaG91c2Vob2xkKV0gPC0gMA0KZnVsbCRpbnN1cmFuY2VbaXMubmEoZnVsbCRpbnN1cmFuY2UpXSA8LSAwDQpmdWxsJGxlYXNpbmdbaXMubmEoZnVsbCRsZWFzaW5nKV0gPC0gMA0KZnVsbCRsb2FuW2lzLm5hKGZ1bGwkbG9hbildIDwtIDANCmZ1bGwkdW5rbm93bltpcy5uYShmdWxsJHVua25vd24pXSA8LSAwDQpmdWxsJEFCW2lzLm5hKGZ1bGwkQUIpXSA8LSAwDQpmdWxsJENEW2lzLm5hKGZ1bGwkQ0QpXSA8LSAwDQpmdWxsJEVGW2lzLm5hKGZ1bGwkRUYpXSA8LSAwDQpmdWxsJEdIW2lzLm5hKGZ1bGwkR0gpXSA8LSAwDQpmdWxsJElKW2lzLm5hKGZ1bGwkSUopXSA8LSAwDQpmdWxsJEtMW2lzLm5hKGZ1bGwkS0wpXSA8LSAwDQpmdWxsJE1OW2lzLm5hKGZ1bGwkTU4pXSA8LSAwDQpmdWxsJE9QW2lzLm5hKGZ1bGwkT1ApXSA8LSAwDQpmdWxsJFFSW2lzLm5hKGZ1bGwkUVIpXSA8LSAwDQpmdWxsJFNUW2lzLm5hKGZ1bGwkU1QpXSA8LSAwDQpmdWxsJFVWW2lzLm5hKGZ1bGwkVVYpXSA8LSAwDQpmdWxsJFdYW2lzLm5hKGZ1bGwkV1gpXSA8LSAwDQpmdWxsJFlaW2lzLm5hKGZ1bGwkWVopXSA8LSAwDQpgYGANCg0KIyMgRGlzdHJpY3RzDQoNCkplZGVyIEt1bmRlIHNvd2llIGplZGVyIEFjY291bnQgaXN0IGVpbmVtIEdlYmlldCB6dWdld2llc2VuLg0KWnVlcnN0IMO8YmVycHLDvGZlbiB3aXIsIG9iIGVzIHNpY2ggZGFiZWkgaW1tZXIgdW0gZGFzc2VsYmUgR2ViaWV0IGhhbmRlbHQuDQoNCmBgYHtyfQ0Kc3VtKGZ1bGwkZGlzdHJpY3RfaWQgIT0gZnVsbCRkaXN0cmljdF9pZC5hY2NvdW50cykNCmBgYA0KDQozNDkgUGVyc29uZW4gaGFiZW4gaWhyZW4gQWNjb3VudCBhbHNvIGluIGVpbmVtIGFuZGVyZW4gRGlzdHJpa3QsIGFscyBzaWUgenVnZXdpZXNlbiBzaW5kLg0KV2lyIG3DvHNzZW4gZGllIERpc3RyaWN0LUluZm9ybWF0aW9uZW4gZsO8ciBiZWlkZSBEaXN0cmljdC1JRCdzIHp1d2Vpc2VuLg0KRGllcyBtYWNoZW4gd2lyIHdpZWRlciBtaXQgTGVmdC1Kb2lucy4NCg0KYGBge3J9DQpmdWxsIDwtIGxlZnRfam9pbihmdWxsLCBkaXN0cmljdHMsIGJ5ID0gImRpc3RyaWN0X2lkIikNCg0KZnVsbCA8LSBsZWZ0X2pvaW4oZnVsbCwgZGlzdHJpY3RzLCBieSA9IGMoImRpc3RyaWN0X2lkLmFjY291bnRzIj0iZGlzdHJpY3RfaWQiKSwgc3VmZml4ID0gYygiIiwgIi5hY2NvdW50cyIpKQ0KYGBgDQoNClp1bSBTY2hsdXNzIGvDtm5uZW4gZGllIHZlcnNjaGllZGVuZW4gSUQncyBlbnRmZXJudCB3ZXJkZW4sIGRhIHNpZSBpcnJlbGV2YW50IGbDvHIgZGFzIE1vZGVsbCBzaW5kIHVuZCBuaWNodCBtZWhyIGdlYnJhdWNodCB3ZXJkZW4uDQpFaW56aWcgZGllIEFjY291bnQtSUQgd2lyZCBpbSBEYXRlbnNhdHogYmVoYWx0ZW4sIGRhbWl0IGRpZSBUcmFuc2FrdGlvbmVuIGhpbnp1Z2Vmw7xndCB3ZXJkZW4ga8O2bm5lbi4NCg0KYGBge3J9DQpmdWxsIDwtIGZ1bGwgJT4lIHNlbGVjdCgtY2xpZW50X2lkLCAtZGlzdHJpY3RfaWQsIC1kaXNwX2lkLCAtZGlzdHJpY3RfaWQuYWNjb3VudHMsIC1sb2FuX2lkKQ0KYGBgDQoNClVuc2VyIHp1c2FtbWVuZ2VzZXR6dGVzIERhdGFmcmFtZSBzaWVodCBudW4gZm9sZ2VuZGVybWFzc2VuIGF1czoNCg0KYGBge3J9DQpmdWxsDQpgYGANCg0KRXIgYmVpbmhhbHRldCAzODU4IEt1bmRlbiBtaXQgNTkgdmVyc2NoaWVkZW5lbiBNZXJrbWFsZW4uDQoNCiMjIFRyYW5zYWN0aW9ucw0KDQpOdW4gbcO8c3NlbiBudXIgbm9jaCBkaWUgVHJhbnNha3Rpb25zZGF0ZW4genVtIERhdGFmcmFtZSBoaW56dWdlZsO8Z3Qgd2VyZGVuLg0KRGllc2UgbcO8c3NlbiBhYmVyIGFuZGVycyB6dXNhbW1lbmdlZmFzc3Qgd2VyZGVuLCBkYSBqZWRlciBLdW5kZSB2aWVsZSBUcmFuc2FrdGlvbmVuIGhhYmVuIGthbm4uDQpEaWUgVHJhbnNha3Rpb25lbiB3ZXJkZW4gZsO8ciBLcmVkaXRrYXJ0ZW5rw6R1ZmVyIHVuZCBOaWNodC1Lw6R1ZmVyIGFnZ3JlZ2llcnQsIHdlc2hhbGIgd2lyIGRpZXNlIGFscyBFcnN0ZXMgYW5oYW5kIGRlciBWYXJpYWJsZSAiaGFzX2NhcmQiIHRyZW5uZW4uDQoNCmBgYHtyfQ0KY2FyZF9idXllcnMgPC0gZnVsbCAlPiUgZmlsdGVyKGhhc19jYXJkID09IFRSVUUpDQpub25fYnV5ZXJzIDwtIGZ1bGwgJT4lIGZpbHRlcihoYXNfY2FyZCA9PSBGQUxTRSkNCg0KcHJpbnQocGFzdGUoIkFuemFobCBLw6R1ZmVyOiIsIGRpbShjYXJkX2J1eWVycylbMV0pKQ0KcHJpbnQocGFzdGUoIkFuemFobCBOaWNodC1Lw6R1ZmVyOiIsIGRpbShub25fYnV5ZXJzKVsxXSkpDQpgYGANCg0KRXMgZ2lidCA3MDYgS3JlZGl0a2FydGVua8OkdWZlciB1bmQgMzE1MiBOaWNodC1Lw6R1ZmVyLg0KDQojIyMgQWdncmVnYXRpb24gZGVyIFRyYW5zYWt0aW9uZW4gZsO8ciBLcmVkaXRrYXJ0ZW5rw6R1ZmVyDQoNCkJlaSBkZW4gS3JlZGl0a2FydGVua8OkdWZlcm4gaXN0IGRlciBaZWl0cHVua3QgZGVzIEtyZWRpdGthcnRlbmthdWZzIGdlZ2ViZW4uDQpEYSB1bnNlciBNb2RlbGwgVm9yaGVyc2FnZW4gc29sbCwgb2IgZWluIEt1bmRlIGVpbmUgS3JlZGlrYXJ0ZSBrYXVmdCwgaGFiZW4gZGllIE1vbmF0ZSB1bm1pdHRlbGJhciB2b3IgZGVtIEthdWZ6ZWl0cHVua3QgZGVuIGdyw7Zzc3RlbiBFaW5mbHVzcy4NCldpciBlcnN0ZWxsZW4gYWxzbyBmw7xyIGplZGVuIEtyZWRpdGthcnRlbmvDpHVmZXIgZWluIFJvbGx1cC1GZW5zdGVyIGbDvHIgZGllIGxldHp0ZW4genfDtmxmIE1vbmF0ZSB2b3IgZGVtIEthdWYgZGVyIEtyZWRpdGthcmUsIHZvciBlaW5lbSBlaW5tb25hdGlnZW4gTGFnIEZlbnN0ZXIgdW5taXR0ZWxiYXIgdm9yIGRlbSBLYXVmZGF1bS4NCkRpZXNlbiBNb25hdCBiZWFjaHRlbiB3aXIgbmljaHQsIGRhIGRpZSBCZWFyYmVpdHVuZyBlaW5lcyBLcmVkaXRrYXJ0ZW5rYXVmcyBldHdhIHp3ZWkgYmlzIHZpZXIgV29jaGVuIGRhdWVybiBrYW5uIHVuZCBzaWNoIGRlciBLdW5kZSBkZW1lbnRzcHJlY2hlbmQgYmVyZWl0cyB2b3IgZGVtIEthdWZkYXR1bSBmw7xyIGVpbmUgS3JlZGl0a2FydGUgZW50c2NoaWVkZW4gaGF0Lg0KDQpBbHMgRXJzdGVzIHdlcmRlbiBkYWbDvHIgZGllIFRyYW5zYWt0aW9uZW4gdm9uIEt1bmRlbiBoZXJhdXNnZWZpbHRlcnQsIHdlbGNoZSBlaW5lIEtyZWRpdGthcnRlIGhhYmVuLg0KDQpgYGB7cn0NCmFjY291bnRfaWRzIDwtIGNhcmRfYnV5ZXJzJGFjY291bnRfaWQNCmJ1eWVyX3RyYW5zYWN0aW9ucyA8LSB0cmFuc2FjdGlvbnNbdHJhbnNhY3Rpb25zJGFjY291bnRfaWQgJWluJSBhY2NvdW50X2lkcyxdDQpgYGANCg0KRGFzIEtyZWRpdGthcnRlbmthdWZkYXR1bSBzb2xsIHp1IGRlbiBUcmFuc2FrdGlvbmVuIGhpbnp1Z2Vmw7xndCB3ZXJkZW4sIGRhbWl0IGRpZXNlIGbDvHIgamVkZW4gS3VuZGVuIGVpbnplbG4gZ2VmaWx0ZXJ0IHdlcmRlbiBrw7ZubmVuLg0KDQpgYGB7cn0NCmJ1eWVyX3RyYW5zYWN0aW9ucyA8LSBtZXJnZShidXllcl90cmFuc2FjdGlvbnMsIGZ1bGxbLCBjKCJhY2NvdW50X2lkIiwgImlzc3VlZCIpXSwgYnk9ImFjY291bnRfaWQiKQ0KYGBgDQoNCk51biBzb2xsZW4gVHJhbnNha3Rpb25lbiBzbyBnZWZpbHRlcnQgd2VyZGVuLCBkYXNzIG51ciBub2NoIFRyYW5zYWt0aW9uZW4gendpc2NoZW4gMTMgTW9uYXRlbiB1bmQgMSBNb25hdCB2b3IgZGVtIEFuZmFuZyBkZXMgTW9uYXRzIGRlcyBLcmVkaXRrYXJ0ZW5rYXVmZXMgdm9ya29tbWVuLg0KDQpgYGB7cn0NCmZpbHRlcl90aW1lX3JhbmdlIDwtIGZ1bmN0aW9uKGRmKQ0Kew0KICBmaWx0ZXJlZF9kZiA8LSBkZiAlPiUNCiAgICBmaWx0ZXIoZGF0ZSA+PSBmbG9vcl9kYXRlKGlzc3VlZCAlbS0lIG1vbnRocygxMyksICJtb250aCIpICYNCiAgICAgICAgIGRhdGUgPD0gKGZsb29yX2RhdGUoaXNzdWVkICVtLSUgbW9udGhzKDEpLCAibW9udGgiKSAtIGRheXMoMSkpKQ0KICByZXR1cm4oZmlsdGVyZWRfZGYpDQp9DQoNCmZpbHRlcmVkX2RmIDwtIGZpbHRlcl90aW1lX3JhbmdlKGJ1eWVyX3RyYW5zYWN0aW9ucykNCmBgYA0KDQpFcyBleGlzdGllcmVuIG9mdCBNb25hdGUsIGJlaSBkZW5lbiBlaW4gS3VuZGUga2VpbmUgVHJhbnNha3Rpb25lbiBnZW1hY2h0IGhhdC4NCkRpZXMgbGllZ3QgZW50d2VkZXIgZGFyYW4sIGRhc3MgZGVyIEt1bmRlIG5pY2h0IHZpZWxlIFRyYW5zYWt0aW9uZW4gdMOkdGlndGUgb2RlciBkaWUgS3JlZGl0a2FydGUgYmVyZWl0cyBpbSBlcnN0ZW4gSmFociBnZWthdWZ0IGhhdC4NCkluIGRpZXNlbiBNb25hdGVuIHdlcmRlbiBpbiBGb2xnZSBqZXdlaWxzIGVpbmUgbGVlcmUgVHJhbnNha3Rpb24gZWluZ2Vmw7xndCwgd2VsY2hlIGRpZSBCYWxhbmNlIGRlciBsZXR6dGVuIFRyYW5zYWt0aW9uIGRlcyBWb3Jtb25hdHMgdHLDpGd0Lg0KDQpgYGB7cn0NCmltcHV0ZV9taXNzaW5nX21vbnRocyA8LSBmdW5jdGlvbihmaWx0ZXJlZF9kZikNCnsNCiAgZmlsdGVyZWRfZGYkbW9udGggPC0gZm9ybWF0KGZpbHRlcmVkX2RmJGRhdGUsICIlWS0lbSIpDQogIHJvd3NfdG9faW1wdXRlIDwtIGZpbHRlcmVkX2RmICU+JSBncm91cF9ieShhY2NvdW50X2lkKSAlPiUgZmlsdGVyKG5fZGlzdGluY3QobW9udGgpICE9IDEyKQ0KICByb3dzX3RvX2ltcHV0ZSA8LSByb3dzX3RvX2ltcHV0ZVtvcmRlcihyb3dzX3RvX2ltcHV0ZSRhY2NvdW50X2lkLCByb3dzX3RvX2ltcHV0ZSRkYXRlKSwgXQ0KICBhY2NvdW50X2lkcyA8LSB1bmlxdWUocm93c190b19pbXB1dGUkYWNjb3VudF9pZCkNCiAgcHJpbnQocGFzdGUobGVuZ3RoKGFjY291bnRfaWRzKSwgInVudm9sbHN0w6RuZGlnZSBBY2NvdW50cyBnZWZ1bmRlbi4iKSkNCiAgcGIgPC0gdHh0UHJvZ3Jlc3NCYXIobWluID0gMCwgbWF4ID0gbGVuZ3RoKGFjY291bnRfaWRzKSwgc3R5bGUgPSAzLCB3aWR0aCA9IDUwLCBjaGFyID0gIj0iKQ0KICANCiAgZm9yIChpIGluIDE6bGVuZ3RoKGFjY291bnRfaWRzKSkNCiAgew0KICAgIHVzZXJfdHJhbnNhY3Rpb25zIDwtIHJvd3NfdG9faW1wdXRlW3Jvd3NfdG9faW1wdXRlJGFjY291bnRfaWQgPT0gYWNjb3VudF9pZHNbaV0sXQ0KICAgIA0KICAgICMgZ2V0IGFsbCBtb250aHMgdGhlIGNsaWVudCBzaG91bGQgaGF2ZSBhIHRyYW5zYWN0aW9uIGluDQogICAgbW9udGhzX3RhcmdldCA8LSBzYXBwbHkoMTM6MiwgZnVuY3Rpb24oeCkgZm9ybWF0KHVzZXJfdHJhbnNhY3Rpb25zJGlzc3VlZFsxXSAlbS0lIG1vbnRocyh4KSwgIiVZLSVtIikpDQogICAgDQogICAgIyBjcmVhdGUgZHVtbXkgdHJhbnNhY3Rpb24gaW4gY2FzZSBmaXJzdCBtb250aCBpcyBlbXB0eQ0KICAgIG5ld190cmFuc2FjdGlvbiA8LSB1c2VyX3RyYW5zYWN0aW9uc1sxLF0NCiAgICBuZXdfdHJhbnNhY3Rpb24kZGlmZmVyZW5jZSA9IDANCiAgICANCiAgICAjIHVzZSBwcmV2X2JhbGFuY2UgaW4gY2FzZSB0aGUgZmlyc3QgZWxlbWVudCBnZXRzIGltcHV0ZWQNCiAgICBuZXdfdHJhbnNhY3Rpb24kYmFsYW5jZSA8LSBuZXdfdHJhbnNhY3Rpb24kcHJldl9iYWxhbmNlDQogICAgDQogICAgZm9yIChtb250aF90YXJnZXQgaW4gbW9udGhzX3RhcmdldCkNCiAgICB7DQogICAgICBuZXdfdHJhbnNhY3Rpb24kZGF0ZSA8LSBhcy5EYXRlKHBhc3RlMChtb250aF90YXJnZXQsICItMDEiKSkNCiAgICAgIG5ld190cmFuc2FjdGlvbiRtb250aCA8LSBtb250aF90YXJnZXQNCiAgICAgICMgZ2V0IGxhc3QgdHJhbnNhY3Rpb24gb2YgY3VycmVudCBtb250aCBmcm9tIHRoZSBjdXJyZW50IHVzZXIncyB0cmFuc2FjdGlvbnMNCiAgICAgIGxhc3RfdHJhbnNhY3Rpb24gPC0gdGFpbCh1c2VyX3RyYW5zYWN0aW9ucyAlPiUgZmlsdGVyKG1vbnRoID09IG1vbnRoX3RhcmdldCksIG49MSkNCiAgICAgIA0KICAgICAgaWYobnJvdyhsYXN0X3RyYW5zYWN0aW9uKSA9PSAwKQ0KICAgICAgew0KICAgICAgICAjIGltcHV0ZSBlbXB0eSB0cmFuc2FjdGlvbiBpbiBtaXNzaW5nIG1vbnRoDQogICAgICAgIGZpbHRlcmVkX2RmIDwtIHJiaW5kKGZpbHRlcmVkX2RmLCBuZXdfdHJhbnNhY3Rpb24pDQogICAgICB9DQogICAgICBlbHNlDQogICAgICB7DQogICAgICAgIG5ld190cmFuc2FjdGlvbiRiYWxhbmNlIDwtIGxhc3RfdHJhbnNhY3Rpb24kYmFsYW5jZQ0KICAgICAgICBuZXdfdHJhbnNhY3Rpb24kcHJldl9iYWxhbmNlIDwtIG5ld190cmFuc2FjdGlvbiRiYWxhbmNlDQogICAgICB9DQogICAgfQ0KICAgIHNldFR4dFByb2dyZXNzQmFyKHBiLCBpKQ0KICB9DQogIGNsb3NlKHBiKQ0KICByZXR1cm4oZmlsdGVyZWRfZGYpDQp9DQoNCmZpbHRlcmVkX2RmIDwtIGltcHV0ZV9taXNzaW5nX21vbnRocyhmaWx0ZXJlZF9kZikNCmBgYA0KDQpCZWkgMTY5IEtyZWRpdGthcnRlbmvDpHVmZXIgaXN0IGtlaW4ga29tcGxldHRlcyAxMi1Nb25hdHMtUm9sbHVwLUZlbnN0ZXIgdm9yaGFuZGVuLg0KQmVpIGFsbGVuIHd1cmRlbiBkaWUgZmVobGVuZGVuIE1vbmF0ZSBpbXB1dGllcnQuDQoNCk51biB3ZXJkZW4gZGllc2UgRGF0ZW4gYWdncmVnaWVydC4NCkVzIHdpcmQgZWluZSBHcnVwcGllcnVuZyBhbmhhbmQgZGVyICJhY2NvdW50X2lkIiB1bmQgZGVzIE1vbmF0cyBnZW1hY2h0Lg0KRGllIFdlcnRlICJkaWZmZXJlbmNlIiB1bmQgImJhbGFuY2UiIGF1ZiB2ZXJzY2hpZWRlbmUgQXJ0ZW4gYWdncmVnaWVydDogQXVmIGJlaWRlbiBXZXJ0ZW4gZXJmYXNzZW4gd2lyIGRhcyBNaW5pbXVtLCBkYXMgTWF4aW11bSwgZGVuIER1cmNoc2Nobml0dCwgZGVuIE1lZGlhbiB1bmQgZGllIFN0YW5kYXJkYWJ3ZWljaHVuZy4NCkJlaSAiYmFsYW5jZSIgZXJmYXNzZW4gd2lyIGRlbiBlcnN0ZW4gdW5kIGRlbiBsZXR6dGVuIFdlcnQgZGVzIE1vbmF0cyB1bmQgYmVpICJkaWZmZXJlbmNlIiBkaWUgQW56YWhsIHBvc2l0aXZlIHVuZCBuZWdhdGl2ZSBEaWZmZXJlbnplbi4NCg0KYGBge3J9DQpnZXRfc3VtbWFyeV9kZiA8LSBmdW5jdGlvbihmaWx0ZXJlZF9kZikNCnsNCiAgc3VtbWFyeV9kZiA8LSBmaWx0ZXJlZF9kZiAlPiUNCiAgZ3JvdXBfYnkoYWNjb3VudF9pZCwgbW9udGgpICU+JQ0KICBzdW1tYXJpc2UoDQogICAgbWF4X2RpZmZlcmVuY2UgPSBtYXgoZGlmZmVyZW5jZSksDQogICAgbWluX2RpZmZlcmVuY2UgPSBtaW4oZGlmZmVyZW5jZSksDQogICAgbWF4X2JhbGFuY2UgPSBtYXgoYmFsYW5jZSksDQogICAgbWluX2JhbGFuY2UgPSBtaW4oYmFsYW5jZSksDQogICAgaW5pdGlhbF9iYWxhbmNlID0gZmlyc3QoYmFsYW5jZSksDQogICAgZW5kX2JhbGFuY2UgPSBsYXN0KGJhbGFuY2UpLA0KICAgIG1lYW5fYmFsYW5jZSA9IG1lYW4oYmFsYW5jZSksDQogICAgbWVkaWFuX2JhbGFuY2UgPSBtZWRpYW4oYmFsYW5jZSksDQogICAgc3RkX2JhbGFuY2UgPSBzZChiYWxhbmNlKSwNCiAgICBtZWFuX2RpZmZlcmVuY2UgPSBtZWFuKGRpZmZlcmVuY2UpLA0KICAgIG1lZGlhbl9kaWZmZXJlbmNlID0gbWVkaWFuKGRpZmZlcmVuY2UpLA0KICAgIHN0ZF9kaWZmZXJlbmNlID0gc2QoZGlmZmVyZW5jZSksDQogICAgY291bnRfcG9zaXRpdmVfZGlmZmVyZW5jZSA9IHN1bShkaWZmZXJlbmNlID4gMCksDQogICAgY291bnRfbmVnYXRpdmVfZGlmZmVyZW5jZSA9IHN1bShkaWZmZXJlbmNlIDwgMCkNCiAgKQ0KICBzdW1tYXJ5X2RmIDwtIHN1bW1hcnlfZGYgJT4lIGFycmFuZ2UoYWNjb3VudF9pZCkNCiAgcmV0dXJuKHN1bW1hcnlfZGYpDQp9DQoNCnN1bW1hcnlfZGYgPC0gZ2V0X3N1bW1hcnlfZGYoZmlsdGVyZWRfZGYpDQpgYGANCg0KRGllc2UgWnVzYW1tZW5mYXNzdW5nIHNpZWh0IG51biBmw7xyIGplZGVuIEt1bmRlbiBmb2xnZW5kZXJtYXNzZW4gYXVzOg0KDQpgYGB7cn0NCnN1bW1hcnlfZGYgJT4lIGZpbHRlcihhY2NvdW50X2lkID09IDcpDQpgYGANCg0KRsO8ciBqZWRlbiBLdW5kZW4gZ2lidCBlcyBudW4gZsO8ciBqZWRlbiBNb25hdCB2b3IgZGVtIEtyZWRpdGthcnRlbmthdWYgZWluZSBaZWlsZSBtaXQgZGVuIGFnZ3JlZ2llcnRlbiBEYXRlbiBkZXMgTW9uYXRzLg0KV2lyIMO8YmVycHLDvGZlbiBub2NoIGt1cnosIG9iIGF1Y2ggd2lya2xpY2ggZsO8ciBqZWRlbiBLdW5kZW4genfDtmxmIE1vbmF0ZSB2b3JoYW5kZW4gc2luZC4NCg0KYGBge3J9DQpnZXRfaW5jb21wbGV0ZV9idXllcnMgPC0gZnVuY3Rpb24oc3VtbWFyeV9kZikNCnsNCiAgIyBLb250cm9sbGUsIG9iIGbDvHIgamVkZW4gYWNjb3VudF9pZCAxMiBtb25hdGUgdm9yaGFuZGVuIHNpbmQNCiAgbW9udGhfY291bnRzIDwtIHN1bW1hcnlfZGYgJT4lDQogICAgICBncm91cF9ieShhY2NvdW50X2lkKSAlPiUNCiAgc3VtbWFyaXNlKG1vbnRoX2NvdW50ID0gbl9kaXN0aW5jdChtb250aCkpDQoNCiAgIyBQcsO8ZmUsIG9iIGplZGVzIGFjY291bnRfaWQgMTIgTW9uYXRlIGhhdA0KICBtb250aF9jb3VudHMgPC0gbW9udGhfY291bnRzICU+JSBmaWx0ZXIobW9udGhfY291bnQgIT0gMTIpDQogIHJldHVybihtb250aF9jb3VudHMpDQp9DQoNCm1vbnRoX2NvdW50cyA8LSBnZXRfaW5jb21wbGV0ZV9idXllcnMoc3VtbWFyeV9kZikNCnByaW50KHBhc3RlKCJBbnphaGwgS3VuZGVuIG1pdCB3ZW5pZ2VyIGFscyAxMiBNb25hdGVuOiIsIGRpbShtb250aF9jb3VudHMpWzFdKSkNCmBgYA0KDQpKZWRlciBLcmVkaXRrYXJ0ZW5rw6R1ZmVyIGhhdCBhbHNvIHdpcmtsaWNoIDEyIE1vbmF0ZS4NCkFscyBuw6RjaHN0ZXMgd29sbGVuIHdpciBkaWVzZSB6d8O2bGYgUm93cyBwcm8gS3VuZGUgenUgZWluZXIgUm93IHVtd2FuZGVsbi4NCkRhZsO8ciBudW1tZXJpZXJlbiB3aXIgenVuw6RjaHN0IGRpZSBNb25hdGUgcHJvIEtyZWRpdGthcnRlbmvDpHVmZXIgdm9uIDEgYmlzIDEyIGR1cmNoLg0KRGFiZWkgaXN0IGRlciBNb25hdCAxMiBkZXIgbGV0enRlIE1vbmF0IHZvciBkZW0gS2F1ZmRhdHVtIChhYmdlc2VoZW4gdm9tIExhZy1Nb25hdCkuDQoNCmBgYHtyfQ0Kc2V0X21vbnRoX2lkcyA8LSBmdW5jdGlvbihzdW1tYXJ5X2RmKQ0Kew0KICAjIFNvcnRpZXJlbiBuYWNoIGFjY291bnRfaWQgdW5kIE1vbmF0DQogIHN1bW1hcnlfZGYgPC0gc3VtbWFyeV9kZltvcmRlcihzdW1tYXJ5X2RmJGFjY291bnRfaWQsIHJldihzdW1tYXJ5X2RmJG1vbnRoKSksXQ0KICANCiAgIyBIaW56dWbDvGdlbiBkZXIgTW9uYXRzbnVtbWVyDQogIHN1bW1hcnlfZGYkZ3JvdXBfaWQgPC0gYXZlKHNlcV9hbG9uZyhzdW1tYXJ5X2RmJGFjY291bnRfaWQpLCBzdW1tYXJ5X2RmJGFjY291bnRfaWQsIEZVTiA9IGZ1bmN0aW9uKHgpIHt4fSkNCiAgc3VtbWFyeV9kZiRtb250aF9udW1iZXIgPC0gMTINCiAgDQogIGZvciAoaSBpbiAyOm5yb3coc3VtbWFyeV9kZikpIHsNCiAgICBpZiAoc3VtbWFyeV9kZiRhY2NvdW50X2lkW2ldICE9IHN1bW1hcnlfZGYkYWNjb3VudF9pZFtpLTFdKSB7DQogICAgICBzdW1tYXJ5X2RmJG1vbnRoX251bWJlcltpXSA8LSAxMg0KICAgIH0gZWxzZSB7DQogICAgICBzdW1tYXJ5X2RmJG1vbnRoX251bWJlcltpXSA8LSBzdW1tYXJ5X2RmJG1vbnRoX251bWJlcltpLTFdIC0gMQ0KICAgIH0NCiAgfQ0KICANCiAgIyBFbnRmZXJuZSBkaWUgU3BhbHRlIGdyb3VwX2lkDQogIHN1bW1hcnlfZGYkZ3JvdXBfaWQgPC0gTlVMTA0KICBzdW1tYXJ5X2RmJG1vbnRoIDwtIE5VTEwNCiAgcmV0dXJuKHN1bW1hcnlfZGYpDQp9DQoNCnN1bW1hcnlfZGYgPC0gc2V0X21vbnRoX2lkcyhzdW1tYXJ5X2RmKQ0KDQpgYGANCg0KQWxzIG7DpGNoc3RlcyBicmF1Y2hlbiB3aXIgcGl2b3Rfd2lkZXIuDQpTbyBoYWJlbiB3aXIgamVkZSBLZW5uemFobCB6d8O2bGYgbWFsIGFscyBLb2xvbm5lLCBqZWRlcyBNYWwgbWl0IGRlciB2b3JoZXIgZXJzdGVsbHRlbiBNb25hdHNudW1tZXIgYWxzIFN1ZmZpeC4NCg0KYGBge3J9DQpwaXZvdF9ieV9tb250aCA8LSBmdW5jdGlvbihzdW1tYXJ5X2RmKQ0Kew0KICBzdW1tYXJ5X2RmX3dpZGUgPC0gc3VtbWFyeV9kZiAlPiUNCiAgICBncm91cF9ieShhY2NvdW50X2lkKSAlPiUNCiAgICBwaXZvdF93aWRlcihuYW1lc19mcm9tID0gbW9udGhfbnVtYmVyLA0KICAgICAgICAgICAgICB2YWx1ZXNfZnJvbSA9IGMobWF4X2RpZmZlcmVuY2UsIG1pbl9kaWZmZXJlbmNlLCBtYXhfYmFsYW5jZSwgbWluX2JhbGFuY2UsIGluaXRpYWxfYmFsYW5jZSwgZW5kX2JhbGFuY2UsIG1lYW5fYmFsYW5jZSwgbWVkaWFuX2JhbGFuY2UsIHN0ZF9iYWxhbmNlLCBtZWRpYW5fYmFsYW5jZSwgc3RkX2JhbGFuY2UsIG1lYW5fZGlmZmVyZW5jZSwgbWVkaWFuX2RpZmZlcmVuY2UsIHN0ZF9kaWZmZXJlbmNlLCBjb3VudF9wb3NpdGl2ZV9kaWZmZXJlbmNlLCBjb3VudF9uZWdhdGl2ZV9kaWZmZXJlbmNlKSkNCiAgcmV0dXJuKHN1bW1hcnlfZGZfd2lkZSkNCn0NCg0Kc3VtbWFyeV9kZl93aWRlIDwtIHBpdm90X2J5X21vbnRoKHN1bW1hcnlfZGYpDQpgYGANCg0KRGFzIGRhcmF1cyByZXN1bHRpZXJlbmRlIERhdGFmcmFtZSBzaWVodCBzbyBhdXM6DQoNCmBgYHtyfQ0Kc3VtbWFyeV9kZl93aWRlDQpgYGANCg0KRsO8ciBqZWRlbiBLcmVkaXRrYXJ0ZW5rw6R1ZmVyIGdpYnQgZXMgamV0enQgZWluZSBSb3cgbWl0IDE2OSB2ZXJzY2hpZWRlbmVuIE1lcmttYWxlbjogRGllIGFjY291bnRfaWQgdW5kIGRpZSAxNCBhZ2dyZWdpZXJ0ZW4gSW5mb3JtYXRpb25lbiDDvGJlciBkaWUgVHJhbnNha3RpaW9uZW4gZsO8ciBhbGxlIDEyIE1vbmF0ZS4NCg0KRGllc2VzIERhdGFmcmFtZSBmw7xnZW4gd2lyIG5vY2ggenUgZGVuIGFuZGVyZW4gSW5mb3JtYXRpb25lbiBkZXIgS3JlZGl0a2FydGVua8OkdWZlciBoaW56dS4NCg0KYGBge3J9DQpzdW1tYXJ5X2RmX2J1eWVycyA8LSBtZXJnZShzdW1tYXJ5X2RmX3dpZGUsIHN1YnNldChjYXJkX2J1eWVycyksIGJ5ID0gImFjY291bnRfaWQiKQ0KYGBgDQoNCiMjIyBBZ2dyZWdhdGlvbiBkZXIgVHJhbnNha3Rpb25lbiBmw7xyIE5pY2h0LUvDpHVmZXINCg0KRsO8ciBOaWNodC1Lw6R1ZmVyIGlzdCBrZWluIERhdHVtIGRlcyBLcmVkaXRrYXJ0ZW5rYXVmcyBnZWdlYmVuLCBkYSBzaWUgamEga2VpbmUgZ2VrYXVmdCBoYWJlbi4NCkVzIHN0ZWxsdCBzaWNoIGFsc28gZGllIEZyYWdlLCB2b24gd2VsY2hlbSBEYXR1bSBhdXMgbWFuIGRhcyBSb2xsdXAtRmVuc3RlciBlcnN0ZWxsdC4NCg0KV2lyIGhhYmVuIHVucyBkYXp1IGVudHNjaGllZGVuLCBmw7xyIGplZGVuIEvDpHVmZXIgZWluZW4gbcO2Z2xpY2hzdCDDpGhubGljaGVuIE5pY2h0LUvDpHVmZXIgenUgZmluZGVuLg0KRGFmw7xyIHdlcmRlbiBOaWNodGvDpHVmZXIgbWl0IGdsZWljaGVtIEdlc2NobGVjaHQgdW5kIGdsZWljaGVyIFJlZ2lvbiBnZXN1Y2h0Lg0KRGFzIEthdWZkYXR1bSBkZXMgw6RobmxpY2hlbiBLw6R1ZmVycyB3aXJkIGRhbm4gYXVmIGRlbiBOaWNodC1Lw6R1ZmVyIMO8YmVydHJhZ2VuLg0KRWluIHdlaXRlcmVzIEtyaXRlcml1bSBpc3QsIGRhc3MgZGVyIE5pY2h0LUvDpHVmZXIgbWluZGVzdGVucyBlaW5lIFRyYW5zYWt0aW9uIGluIGRlbSBSb2xsdXAtRmVuc3RlciBoYWJlbiBtdXNzLg0KSmVkZXIgTmljaHQtS8OkdWZlciB3aXJkIG1heGltYWwgZWlubWFsIGFscyBNYXRjaCBnZW5vbW1lbiwgZGFtaXQga2VpbmUgZG9wcGVsdGVuIEt1bmRlbiBpbSBEYXRlbnNhdHogdm9ya29tbWVuLg0KDQpEdXJjaCBkaWVzZXMgVm9yZ2VoZW4gYmVudXR6ZW4gd2lyIG51ciBlaW5lbiBUZWlsIGRlciBOaWNodC1Lw6R1ZmVyLCBoYWJlbiBhYmVyIGRpcmVrdGUsIMOkaG5saWNoZSBWZXJnbGVpY2hzcGVyc29uZW4sIHdlbGNoZSBpbSBnbGVpY2hlbiBaZWl0cmF1bSBrZWluZSBLcmVkaXRrYXJ0ZW4gZ2VrYXVmdCBoYWJlbi4NCkF1c3NlcmRlbSBicmluZ3QgZGFzIFZvcmdlaGVuIGF1Y2ggZGVuIFZvcnRlaWwsIGRhc3MgZGllIERhdGVuIGbDvHIgZGFzIE1vZGVsbCBhdXRvbWF0aXNjaCBCYWxhbmNlZCBzaW5kLg0KRGllcyBtYWNodCBkYXMgVHJhaW5pZXJlbiBkZXMgTW9kZWxscyBlaW5mYWNoZXIsIGRhIGVzIGRhenUgYmVpdHLDpGd0LCBkYXNzIGRhcyBNb2RlbGwgbmljaHQgQmlhc2VkIGdlZ2Vuw7xiZXIgZGVuIE5pY2h0LUvDpHVmZXJuIHdpcmQuDQoNCmBgYHtyfQ0KcGIgPC0gdHh0UHJvZ3Jlc3NCYXIobWluID0gMCwgbWF4ID0gbnJvdyhjYXJkX2J1eWVycyksIHN0eWxlID0gMywgd2lkdGggPSA1MCwgY2hhciA9ICI9IikNCg0KIyBFcnN0ZWxsZSBlaW4gbGVlcmVzIERhdGFGcmFtZSAic2ltaWxhcl9ub25fYnV5ZXJzIg0Kc2ltaWxhcl9ub25fYnV5ZXJzIDwtIGRhdGEuZnJhbWUoKQ0KDQojIEl0ZXJpZXJlIMO8YmVyIGplZGVuIEt1bmRlbiBpbSBEYXRhRnJhbWUgImJ1eWVycyINCmZvciAoaSBpbiAxOm5yb3coY2FyZF9idXllcnMpKSANCnsNCiAgIyBXw6RobGUgZGVuIGFrdHVlbGxlbiBLdW5kZW4gYXVzIGRlbSBEYXRhRnJhbWUgImJ1eWVycyINCiAgY3VycmVudF9idXllciA8LSBjYXJkX2J1eWVyc1tpLCBdDQogIA0KICBzaW1pbGFyX25vbl9idXllcnNfdGVtcCA8LSBub25fYnV5ZXJzICU+JSBmaWx0ZXIoZ2VuZGVyID09IGN1cnJlbnRfYnV5ZXIkZ2VuZGVyICYgDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICByZWdpb24gPT0gY3VycmVudF9idXllciRyZWdpb24pDQogIA0KICAjIGRhbWl0IG5pY2h0IGRlciBnbGVpY2hlIG5vbl9idXllciBkb3BwZWx0IHZlcndlbmRldCB3aXJkDQogIHNpbWlsYXJfbm9uX2J1eWVyc190ZW1wIDwtIHNpbWlsYXJfbm9uX2J1eWVyc190ZW1wWyFzaW1pbGFyX25vbl9idXllcnNfdGVtcCRhY2NvdW50X2lkICVpbiUgc2ltaWxhcl9ub25fYnV5ZXJzJGFjY291bnRfaWQsXQ0KICANCiAgIyBmaWx0ZXJlIG5vbi1idXllcnMgaGVyYXVzLCB3ZWxjaGUga2VpbmUgVHJhbnNha3Rpb25lbiBpbSByZWxldmFudGVuIFplaXRyYXVtIHZvciBpc3N1ZWQgaGFiZW4NCiAgc2ltaWxhcl9ub25fYnV5ZXJzX3RlbXAkaXNzdWVkIDwtIGN1cnJlbnRfYnV5ZXIkaXNzdWVkDQogIG5vbl9idXllcl90cmFuc2FjdGlvbnMgPC0gbWVyZ2UodHJhbnNhY3Rpb25zLCBzaW1pbGFyX25vbl9idXllcnNfdGVtcFssIGMoImFjY291bnRfaWQiLCAiaXNzdWVkIildLCBieT0nYWNjb3VudF9pZCcpDQogIG5vbl9idXllcl9maWx0ZXJlZCA8LSBmaWx0ZXJfdGltZV9yYW5nZShub25fYnV5ZXJfdHJhbnNhY3Rpb25zKQ0KICBub25fYnV5ZXJfaWRzIDwtIHVuaXF1ZShub25fYnV5ZXJfZmlsdGVyZWQkYWNjb3VudF9pZCkNCiAgDQogIHNpbWlsYXJfbm9uX2J1eWVyc190ZW1wIDwtIHNpbWlsYXJfbm9uX2J1eWVyc190ZW1wW3NpbWlsYXJfbm9uX2J1eWVyc190ZW1wJGFjY291bnRfaWQgJWluJSBub25fYnV5ZXJfaWRzLF0NCiAgICAgICAgICAgDQogIGlmKG5yb3coc2ltaWxhcl9ub25fYnV5ZXJzX3RlbXApID4gMCkNCiAgew0KICAgICMgV8OkaGxlIGRlbiBhbSBiZXN0ZW4gcGFzc2VuZGVuIEt1bmRlbiBhdXMgInNpbWlsYXJfbm9uX2J1eWVyc190ZW1wIiBhdXMNCiAgICBiZXN0X21hdGNoX2luZGV4IDwtIHdoaWNoLm1pbihhYnMoc2ltaWxhcl9ub25fYnV5ZXJzX3RlbXAkYWdlIC0gY3VycmVudF9idXllciRhZ2UpKQ0KICAgIGJlc3RfbWF0Y2ggPC0gc2ltaWxhcl9ub25fYnV5ZXJzX3RlbXBbYmVzdF9tYXRjaF9pbmRleCwgXQ0KICAgIA0KICAgIHNpbWlsYXJfbm9uX2J1eWVycyA8LSByYmluZChzaW1pbGFyX25vbl9idXllcnMsIGNvcHkoYmVzdF9tYXRjaCkpDQogICAgc2V0VHh0UHJvZ3Jlc3NCYXIocGIsIGkpDQogIH0NCiAgZWxzZQ0KICB7DQogICAgcHJpbnQocGFzdGUwKGN1cnJlbnRfYnV5ZXIkYWNjb3VudF9pZCwgIjogbm8gbm9uLWJ1eWVyIGZvdW5kIikpDQogIH0NCn0NCg0KY2xvc2UocGIpDQpgYGANCg0KYGBge3J9DQpwcmludChwYXN0ZSgiQW56YWhsIEJ1eWVyczoiLCBsZW5ndGgodW5pcXVlKGNhcmRfYnV5ZXJzJGFjY291bnRfaWQpKSkpDQpwcmludChwYXN0ZSgiQW56YWhsIGdlZnVuZGVuZSBNYXRjaGVzOiIsIGxlbmd0aCh1bmlxdWUoc2ltaWxhcl9ub25fYnV5ZXJzJGFjY291bnRfaWQpKSkpDQpgYGANCg0KV2llIGhpZXIgc2ljaHRiYXIgd2lyZCwga29ubnRlIHp1IGFsbGVuIEthcnRlbmvDpHVmZXIgZWluIHBhc3NlbmRlciBOaWNodC1Lw6R1ZmVyIGdlZnVuZGVuIHdlcmRlbi4NCkF1ZiBkaWVzZW4gc29sbGVuIGRpZSBUcmFuc2FrdGlvbnNkYXRlbiBqZXR6dCBnbGVpY2ggd2llIGJlaSBkZW4gS3JlZGl0a2FydGVua8OkdWZlcm4gYWdncmVnaWVydCB3ZXJkZW4uDQpBbHMgZXJzdGVzIHdlcmRlbiBkaWUgVHJhbnNha3Rpb25lbiB3aWVkZXIgYXVmIGRhcyBnZWdlYmVuZSBSb2xsdXAtRmVuc3RlciBnZWZpbHRlcnQuDQoNCmBgYHtyfQ0KIyBmaW5kIG1pc3NpbmdzDQpub25fYnV5ZXJfdHJhbnNhY3Rpb25zIDwtIG1lcmdlKHRyYW5zYWN0aW9ucywgc2ltaWxhcl9ub25fYnV5ZXJzWywgYygiYWNjb3VudF9pZCIsICJpc3N1ZWQiKV0sIGJ5PSdhY2NvdW50X2lkJykNCmZpbHRlcmVkX2RmIDwtIGZpbHRlcl90aW1lX3JhbmdlKG5vbl9idXllcl90cmFuc2FjdGlvbnMpDQpgYGANCg0KQWxzIG7DpGNoc3RlcyB3ZXJkZW4gd2llZGVyIEFnZ3JlZ2F0aW9uZW4gZsO8ciBqZWRlbiBNb25hdCBlcnN0ZWxsdCB1bmQgZmVobGVuZGUgTW9uYXRlIGFuYWxvZyB6dSBkZW4gS3JlZGl0a2FydGVua8OkdWZlcm4gaW1wdXRpZXJ0Lg0KDQpgYGB7cn0NCmZpbHRlcmVkX2RmIDwtIGltcHV0ZV9taXNzaW5nX21vbnRocyhmaWx0ZXJlZF9kZikNCg0Kc3VtbWFyeV9kZl9ub25fYnV5ZXJzIDwtIGdldF9zdW1tYXJ5X2RmKGZpbHRlcmVkX2RmKQ0KYGBgDQoNCkF1Y2ggaGllciBoYWJlbiAxNjggS3VuZGVuIGtlaW4gdm9sbHN0w6RuZGlnZXMgUm9sbHVwLUZlbnN0ZXIuDQpXaXIgw7xiZXJwcsO8ZmVuIHdpZWRlciwgb2IgZsO8ciBqZWRlbiBLdW5kZW4gYWxsZSAxMiBNb25hdGUgdm9yaGFuZGVuIHNpbmQuDQoNCmBgYHtyfQ0KbW9udGhfY291bnRzIDwtIGdldF9pbmNvbXBsZXRlX2J1eWVycyhzdW1tYXJ5X2RmX25vbl9idXllcnMpDQpwcmludChwYXN0ZSgiQW56YWhsIEt1bmRlbiBtaXQgd2VuaWdlciBhbHMgMTIgTW9uYXRlbjoiLCBkaW0obW9udGhfY291bnRzKVsxXSkpDQpgYGANCg0KRGllIEltcHV0YXRpb24gaGF0IGZ1bmt0aW9uaWVydCwgZXMgZ2lidCBrZWluZSBLdW5kZW4gbWl0IHdlbmlnZXIgYWxzIDEyIE1vbmF0ZW4uDQpOdW4gd2VyZGVuIGRpZSBEYXRlbiB3aWVkZXIgYXVmIGVpbmUgUm93IGF1c2dld2VpdGV0IHVuZCBtaXQgZGVuIGFuZGVyZW4gSW5mb3JtYXRpb25lbiBkZXIgS3VuZGVuIHp1c2FtbWVuZ2Vmw7xndC4NCg0KYGBge3J9DQpzdW1tYXJ5X2RmX25vbl9idXllcnMgPC0gc2V0X21vbnRoX2lkcyhzdW1tYXJ5X2RmX25vbl9idXllcnMpDQpzdW1tYXJ5X2RmX3dpZGUgPC0gcGl2b3RfYnlfbW9udGgoc3VtbWFyeV9kZl9ub25fYnV5ZXJzKQ0Kc3VtbWFyeV9kZl9ub25fYnV5ZXJzIDwtIG1lcmdlKHN1bW1hcnlfZGZfd2lkZSwgc2ltaWxhcl9ub25fYnV5ZXJzLCBieSA9ICJhY2NvdW50X2lkIikNCmBgYA0KDQpadW0gU2NobHVzcyB3ZXJkZW4gZGllIEvDpHVmZXIgdW5kIGRpZSBOaWNodC1Lw6R1ZmVyIGluIGVpbmVtIERhdGVuc2F0eiBrb21iaW5pZXJ0Lg0KRGllIEFjY291bnQtSUQga2FubiBub2NoIGVudGZlcm50IHdlcmRlbi4NCg0KYGBge3J9DQpmaW5hbF9kZiA8LSByYmluZChzdW1tYXJ5X2RmX2J1eWVycywgc3VtbWFyeV9kZl9ub25fYnV5ZXJzKQ0KZmluYWxfZGYkYWNjb3VudF9pZCA8LSBOVUxMDQpgYGANCg0KQXVzc2VyZGVtIHNjaGVpbmVuIGVpbmlnZSBWYXJpYWJlbG4gYWxzIEZha3RvcmVuIGltIERhdGVuc2F0eiB6dSBzZWluLCB3ZWxjaGUgZWlnZW50bGljaCBudW1lcmlzY2ggd8OkcmVuLg0KDQpgYGB7cn0NCmZpbmFsX2RmJHVuZW1wbG95bWVudF9yYXRlXzk1IDwtIGFzLm51bWVyaWMoZmluYWxfZGYkdW5lbXBsb3ltZW50X3JhdGVfOTUpDQpmaW5hbF9kZiR1bmVtcGxveW1lbnRfcmF0ZV85NS5hY2NvdW50cyA8LSBhcy5udW1lcmljKGZpbmFsX2RmJHVuZW1wbG95bWVudF9yYXRlXzk1LmFjY291bnRzKQ0KZmluYWxfZGYkY3JpbWVzXzk1IDwtIGFzLm51bWVyaWMoZmluYWxfZGYkY3JpbWVzXzk1KQ0KZmluYWxfZGYkY3JpbWVzXzk1LmFjY291bnRzIDwtIGFzLm51bWVyaWMoZmluYWxfZGYkY3JpbWVzXzk1LmFjY291bnRzKQ0KYGBgDQoNCkJlaSBkZW4gYmVyZWNobmV0ZW4gU3RhbmRhcmRhYndlaWNodW5nIGtvbW10IGVzIGF1Y2ggenUgTkEtV2VydGVuLCBkYSBlcyBNb25hdGUgbWl0IG51ciBlaW5lciBUcmFuc2FrdGlvbiBnaWJ0IHVuZCBkYXJhdXMgZWluZSBOdWxsLURpdmlzb24gZW50c3RlaHQuDQpEaWVzZSBmZWhsZW5kZW4gV2VydGUgd2VyZGVuIGR1cmNoIDAgZXJzZXR6dC4NCg0KYGBge3J9DQpzdGRfY29scyA8LSBjb2xuYW1lcyhmaW5hbF9kZiAlPiUgc2VsZWN0KHN0YXJ0c193aXRoKCJzdGQiKSkpDQpmaW5hbF9kZlssc3RkX2NvbHNdIDwtIGZpbmFsX2RmWyxzdGRfY29sc10gJT4lIHJlcGxhY2UoaXMubmEoLiksIDApDQpgYGANCg0KVW5zZXIgZmluYWxlcyBEYXRhZnJhbWUgc2llaHQgd2llIGZvbGd0IGF1czoNCg0KYGBge3J9DQpmaW5hbF9kZg0KYGBgDQoNCkRlciBEYXRlbnNhdHogZW50aMOkbHQgMTQxMiBLdW5kZW4gbWl0IDIyNiB2ZXJzY2hpZWRlbmVuIFZhcmlhYmVsbi4NCkRpZSBIw6RsZnRlIGRlciBLdW5kZW4gc2luZCBLcmVkaXRrYXJ0ZW5rw6R1ZmVyLg0KRGllIFppZWx2YXJpYWJlbCBmw7xyIHNww6R0ZXJlIE1vZGVsbGUgaXN0ICJoYXNfY2FyZCIuDQoNCiMgRURBDQoNCk51biB3b2xsZW4gd2lyIHVuc2VyIERhdGFmcmFtZSBub2NoIGVpbiB3ZW5pZyBnZW5hdWVyIHVudGVyIGRpZSBMdXBwZSBuZWhtZW4uDQoNCiMjIEFuemFobCBLcmVkaXRrYXJ0ZW4tS8OkdWZlciB1bmQgTmljaHQtS8OkdWZlcg0KDQpgYGB7cn0NCmdncGxvdChkYXRhID0gZmluYWxfZGYsIGFlcyh4ID0gaGFzX2NhcmQpKSArDQogIGdlb21fYmFyKGFlcyh5ID0gYWZ0ZXJfc3RhdChjb3VudCkpLCBzdGF0ID0gImNvdW50IiwgZmlsbCA9ICJzdGVlbGJsdWUiKSArDQogIGxhYnMoeCA9ICJJc3QgS8OkdWZlciIsIHkgPSAiQW56YWhsIiwgdGl0bGUgPSAiQW56YWhsIEtyZWRpdGthcnRlbi1Lw6R1ZmVyIHVuZCBOaWNodC1Lw6R1ZmVyIikNCmBgYA0KDQpEYSB3aXIgZsO8ciBqZWRlbiBLcmVkaXRrYXJ0ZW5rw6R1ZmVyIGdlbmF1IGVpbmVuIEvDpHVmZXIgc3VjaGVuLCBpc3QgZGVyIERhdGVuc2F0eiBhdXNnZWdsaWNoZW46IEVzIGhhdCBnbGVpY2hlIHZpZWxlIE5pY2h0LUvDpHVmZXIgd2llIEvDpHVmZXIuDQoNCiMjIFZlcnRlaWx1bmcgZGVyIEthdWZkYXRlbg0KDQpgYGB7cn0NCmdncGxvdChmaW5hbF9kZiwgYWVzKHggPSBpc3N1ZWQsIGZpbGwgPSBmYWN0b3IoaGFzX2NhcmQpKSkgKw0KICBnZW9tX2RlbnNpdHkoYWxwaGEgPSAwLjUpICsNCiAgbGFicyh4ID0gIkthdWZkYXR1bSIsIHkgPSAiRGljaHRlIiwgZmlsbCA9ICJIYXMgQ2FyZCIsIHRpdGxlID0gIlZlcnRlaWx1bmcgZGVyIEthdWZkYXRlbiIpICsNCiAgc2NhbGVfeF9kYXRlKGxpbWl0cyA9IHJhbmdlKGZpbmFsX2RmJGlzc3VlZCkpDQpgYGANCg0KRGllc2VzIERpYWdyYW1tIHplaWd0IGRpZSBWZXJ0ZWlsdW5nIGRlciBLYXVmZGF0ZW4gZGVyIEt1bmRlbi4NCkRhIGRhcyBLYXVmZGF0dW0gZGVzIE5pY2h0LUvDpHVmZXJzIGF1ZiBkYXMgZGVzIEvDpHVmZXJzIGdlc2V0enQgd2lyZCwgc2luZCBkaWUgVmVydGVpbHVuZ2VuIGRlciBiZWlkZW4gS2xhc3NlbiBoaWVyIGRlY2t1bmdzZ2xlaWNoLg0KSW4gZGVuIEFuZmFuZ3NqYWhyZW4gZGVzIERhdGVuc2F0emVzIGdpYnQgZXMgbm9jaCBzZWhyIHdlbmlnZSBLcmVkaXRrYXJ0ZW5rw6R1ZmUsIGRpZSBUZW5kZW56IGlzdCBqZWRvY2ggc3RlaWdlbmQuDQpBYiAxOTk2IGVybGViZW4gZGllIEtyZWRpdGthcnRlbmvDpHVmZSBlaW5lbiBzdGVpbGVuIEF1ZnNjaHd1bmcsIHdlbGNoZXIgTWl0dGUgMTk5OCB6dSBzZWluZW0gSMO2aGVwdW5rdCBrb21tdC4NCkRhbmFjaCB3ZXJkZW4gd2llZGVyIHdlbmlnZXIgS8OkdWZlIGdldMOkdGlndC4NCg0KIyMgRW50d2lja2x1bmcgZGVyIFZlcm3Dtmdlbg0KDQpBbHMgbsOkY2hzdGVzIHdvbGxlbiB3aXIgZGFzIFZlcm3DtmdlbiAoYmFsYW5jZSkgZGVyIEt1bmRlbiBhbnNjaGF1ZW4uDQpXaXIgYmVvYmFjaHRlbiwgb2Igc2ljaCBkYXMgVmVybcO2Z2VuIHZvbiBLdW5kZW4gdW5kIG5pY2h0IEt1bmRlbiBiZXrDvGdsaWNoIEjDtmhlIHVuZCBFbnR3aWNrbHVuZyB1bnRlcnNjaGVpZGV0Lg0KDQpgYGB7cn0NCmF2ZXJhZ2VzX3RydWUgPC0gY29sTWVhbnMoZmluYWxfZGZbZmluYWxfZGYkaGFzX2NhcmQgPT0gVFJVRSwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgYygibWVhbl9iYWxhbmNlXzEiLCAibWVhbl9iYWxhbmNlXzIiLCAibWVhbl9iYWxhbmNlXzMiLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICJtZWFuX2JhbGFuY2VfNCIsICJtZWFuX2JhbGFuY2VfNSIsICJtZWFuX2JhbGFuY2VfNiIsDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgIm1lYW5fYmFsYW5jZV83IiwgIm1lYW5fYmFsYW5jZV84IiwgIm1lYW5fYmFsYW5jZV85IiwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAibWVhbl9iYWxhbmNlXzEwIiwgIm1lYW5fYmFsYW5jZV8xMSIsICJtZWFuX2JhbGFuY2VfMTIiKV0pDQoNCmF2ZXJhZ2VzX2ZhbHNlIDwtIGNvbE1lYW5zKGZpbmFsX2RmW2ZpbmFsX2RmJGhhc19jYXJkID09IEZBTFNFLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgYygibWVhbl9iYWxhbmNlXzEiLCAibWVhbl9iYWxhbmNlXzIiLCAibWVhbl9iYWxhbmNlXzMiLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAibWVhbl9iYWxhbmNlXzQiLCAibWVhbl9iYWxhbmNlXzUiLCAibWVhbl9iYWxhbmNlXzYiLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAibWVhbl9iYWxhbmNlXzciLCAibWVhbl9iYWxhbmNlXzgiLCAibWVhbl9iYWxhbmNlXzkiLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAibWVhbl9iYWxhbmNlXzEwIiwgIm1lYW5fYmFsYW5jZV8xMSIsICJtZWFuX2JhbGFuY2VfMTIiKV0pDQoNCmdncGxvdCgpICsNCiAgZ2VvbV9saW5lKGFlcyh4ID0gMToxMiwgeSA9IGF2ZXJhZ2VzX3RydWUsIGNvbG9yID0gIkvDpHVmZXIiKSkgKw0KICBnZW9tX2xpbmUoYWVzKHggPSAxOjEyLCB5ID0gYXZlcmFnZXNfZmFsc2UsIGNvbG9yID0gIk5pY2h0LUvDpHVmZXIiKSkgKw0KICBsYWJzKHggPSAiTW9uYXQiLCB5ID0gIkR1cmNoc2Nobml0dGxpY2hlcyBWZXJtw7ZnZW4iLCB0aXRsZSA9ICJWZXJtw7ZnZW5zZW50d2lja2x1bmciKSArDQogIHNjYWxlX2NvbG9yX21hbnVhbChuYW1lID0gIkt1bmRlbiIsIHZhbHVlcyA9IGMoIkvDpHVmZXIiID0gInN0ZWVsYmx1ZSIsICJOaWNodC1Lw6R1ZmVyIiA9ICJyZWQiKSkgKw0KICBzY2FsZV94X2NvbnRpbnVvdXMobGltaXRzID0gYygxLCAxMikpICsNCiAgc2NhbGVfeV9jb250aW51b3VzKGxpbWl0cyA9IGMoMCwgTkEpKSArDQogIHRoZW1lKGxlZ2VuZC5wb3NpdGlvbiA9ICJyaWdodCIpDQpgYGANCg0KS3JlZGl0a2FydGVua8OkdWZlciBoYWJlbiBpbSBTY2huaXR0IGVpbiBow7ZoZXJlcyBWZXJtw7ZnZW4gYWxzIE5pY2h0LUvDpHVmZXIuDQpEYXMgVmVybcO2Z2VuIGFsbGVyIEt1bmRlbiBzdGVpZ3QgdGVuZGVuemllbGwsIHdvYmVpIGRhcyBkZXIgS8OkdWZlciBzdGVpbGVyIGFscyBkYXMgZGVyIE5pY2h0LUvDpHVmZXIgc3RlaWd0Lg0KQWIgZGVtIHNpZWJ0ZW4gTW9uYXQgc2NoZWludCBhYmVyIGF1Y2ggZGllc2UgVmVybcO2Z2Vuc3N0ZWlnZXJ1bmcgYWJ6dWZsYWNoZW4uDQoNCiMjIEFuemFobCBUcmFuc2FrdGlvbmVuDQoNCkFscyBuw6RjaHN0ZXMgd29sbGVuIHdpciB1bnRlcnN1Y2hlbiwgb2Igc2ljaCBLcmVkaXRrYXJ0ZW5rw6R1ZmVyIHVuZCBOaWNodC1Lw6R1ZmVyIGR1cmNoIGRpZSBBbnphaGwgZ2V0w6R0aWd0ZXIgVHJhbnNha3Rpb25lbiB1bnRlcnNjaGVpZGVuLg0KRGFmw7xyIHNjaGF1ZW4gd2lyIGRpZSBkdXJjaHNjaG5pdHRsaWNoZSBBbnphaGwgVHJhbnNha3Rpb25lbiBmw7xyIGJlaWRlIEtsYXNzZW4gYW4uDQoNCmBgYHtyfQ0KYXZnX3N1bV9uZWdhdGl2ZV90cnVlIDwtIG1lYW4ocm93U3VtcyhmaW5hbF9kZltmaW5hbF9kZiRoYXNfY2FyZCA9PSBUUlVFLCBncmVwKCJjb3VudF9uZWdhdGl2ZV9kaWZmZXJlbmNlIiwgY29sbmFtZXMoZmluYWxfZGYpKV0pKQ0KYXZnX3N1bV9uZWdhdGl2ZV9mYWxzZSA8LSBtZWFuKHJvd1N1bXMoZmluYWxfZGZbZmluYWxfZGYkaGFzX2NhcmQgPT0gRkFMU0UsIGdyZXAoImNvdW50X25lZ2F0aXZlX2RpZmZlcmVuY2UiLCBjb2xuYW1lcyhmaW5hbF9kZikpXSkpDQoNCmF2Z19zdW1fcG9zaXRpdmVfdHJ1ZSA8LSBtZWFuKHJvd1N1bXMoZmluYWxfZGZbZmluYWxfZGYkaGFzX2NhcmQgPT0gVFJVRSwgZ3JlcCgiY291bnRfcG9zaXRpdmVfZGlmZmVyZW5jZSIsIGNvbG5hbWVzKGZpbmFsX2RmKSldKSkNCmF2Z19zdW1fcG9zaXRpdmVfZmFsc2UgPC0gbWVhbihyb3dTdW1zKGZpbmFsX2RmW2ZpbmFsX2RmJGhhc19jYXJkID09IEZBTFNFLCBncmVwKCJjb3VudF9wb3NpdGl2ZV9kaWZmZXJlbmNlIiwgY29sbmFtZXMoZmluYWxfZGYpKV0pKQ0KDQphdmdfc3VtX2JvdGhfdHJ1ZSA9IGF2Z19zdW1fbmVnYXRpdmVfdHJ1ZSArIGF2Z19zdW1fcG9zaXRpdmVfdHJ1ZQ0KYXZnX3N1bV9ib3RoX2ZhbHNlID0gYXZnX3N1bV9uZWdhdGl2ZV9mYWxzZSArIGF2Z19zdW1fcG9zaXRpdmVfZmFsc2UNCg0KZ2dwbG90KCkgKw0KICBnZW9tX2JhcihhZXMoeCA9IGMoIkvDpHVmZXIiLCAiTmljaHQtS8OkdWZlciIpLCB5ID0gYyhhdmdfc3VtX2JvdGhfdHJ1ZSwgYXZnX3N1bV9ib3RoX2ZhbHNlKSksIHN0YXQgPSAiaWRlbnRpdHkiLCBmaWxsID0gYygic3RlZWxibHVlIiwgInJlZCIpKSArDQogIGxhYnMoeCA9ICIiLCB5ID0gIkR1cmNoc2Nobml0dGxpY2hlIEFuemFobCBUcmFuc2FrdGlvbmVuIiwgdGl0bGUgPSAiRHVyY2hzY2huaXR0bGljaGUgQW56YWhsIFRyYW5zYWt0aW9uZW4gaW0gZ2FuemVuIFJvbGx1cC1GZW5zdGVyIikNCmBgYA0KDQpLcmVkaXRrYXJ0ZW5rw6R1ZmVyIGhhYmVuIGFsc28gaW0gU2Nobml0dCBtZWhyIFRyYW5zYWt0aW9uZW4gZ2V0w6R0aWd0IGFscyBOaWNodC1Lw6R1ZmVyIGltIFJvbGx1cC1GZW5zdGVyLg0KRG9jaCB3aWUgVmVyaMOkbHQgZXMgc2ljaCwgd2VubiB3aXIgQW56YWhsIHBvc2l0aXZlIHVuZCBBbnphaGwgbmVnYXRpdmUgVHJhbnNha3Rpb25lbiBzZXBhcmF0IGJldHJhY2h0ZW4/DQoNCmBgYHtyfQ0KZ2dwbG90KCkgKw0KICBnZW9tX2JhcihhZXMoeCA9IGMoIkvDpHVmZXIgQXVzZ2FiZW4iLCAiTmljaHQtS8OkdWZlciBBdXNnYWJlbiIsICJLw6R1ZmVyIEVpbm5haG1lbiIsICJOaWNodC1Lw6R1ZmVyIEVpbm5haG1lbiIpLCB5ID0gYyhhdmdfc3VtX25lZ2F0aXZlX3RydWUsIGF2Z19zdW1fbmVnYXRpdmVfZmFsc2UsIGF2Z19zdW1fcG9zaXRpdmVfdHJ1ZSwgYXZnX3N1bV9wb3NpdGl2ZV9mYWxzZSkpLCBzdGF0ID0gImlkZW50aXR5IiwgZmlsbCA9IGMoInN0ZWVsYmx1ZSIsICJyZWQiLCAic3RlZWxibHVlIiwgInJlZCIpKSArDQogIGxhYnMoeCA9ICIiLCB5ID0gIkR1cmNoc2Nobml0dGxpY2hlIEFuemFobCBUcmFuc2FrdGlvbmVuIiwgdGl0bGUgPSAiRHVyY2hzY2huaXR0bGljaGUgQW56YWhsIFRyYW5zYWt0aW9uZW4gaW0gZ2FuemVuIFJvbGx1cC1GZW5zdGVyIikNCmBgYA0KDQpCZWlkZSBLbGFzc2VuIGhhYmVuIG1laHIgcG9zaXRpdmUgVHJhbnNha3Rpb25lbiBhbHMgbmVnYXRpdmUsIHdvYmVpIEvDpHVmZXIgYmVpIHBvc2l0aXZlbiBzb3dpZSBiZWkgbmVnYXRpdmVuIGR1cmNoc2Nobml0dGxpY2ggbWVociBoYWJlbi4NCkJlaSBkZW4gRWlubmFobWVuIGlzdCBkZXIgVW50ZXJzY2hpZWQgZWluIHdlbmlnIGjDtmhlciBhbHMgYmVpIGRlbiBBdXNnYWJlbi4NCg0KIyMgRGFybGVoZW4NCg0KSGllciBzb2xsIHVudGVyc3VjaHQgd2VyZGVuLCBvYiBLw6R1ZmVyIG1laHIgRGFybGVoZW4gYmVpIGRlciBCYW5rIGF1Zm5laG1lbiBhbHMgTmljaHQtS8OkdWZlci4NCg0KYGBge3J9DQpmaW5hbF9kZg0KYGBgDQoNCmBgYHtyfQ0KY2FyZF9idXllcnNfd2l0aF9sb2FuIDwtIGZpbmFsX2RmW2ZpbmFsX2RmJGhhc19jYXJkICYgZmluYWxfZGYkc3RhdHVzICE9ICJub19sb2FuIixdDQpub25fYnV5ZXJzX3dpdGhfbG9hbiA8LSBmaW5hbF9kZlshZmluYWxfZGYkaGFzX2NhcmQgJiBmaW5hbF9kZiRzdGF0dXMgIT0gIm5vX2xvYW4iLF0NCg0KY2FyZF9idXllcnNfd2l0aF9sb2FuX2NvdW50IDwtIGxlbmd0aChjYXJkX2J1eWVyc193aXRoX2xvYW4kaGFzX2NhcmQpDQpub25fYnV5ZXJzX3dpdGhfbG9hbl9jb3VudCA8LSBsZW5ndGgobm9uX2J1eWVyc193aXRoX2xvYW4kaGFzX2NhcmQpDQoNCmdncGxvdCgpICsNCiAgZ2VvbV9iYXIoYWVzKHggPSBjKCJLw6R1ZmVyIiwgIk5pY2h0LUvDpHVmZXIiKSwgeSA9IGMoY2FyZF9idXllcnNfd2l0aF9sb2FuX2NvdW50LCBub25fYnV5ZXJzX3dpdGhfbG9hbl9jb3VudCkpLCBzdGF0ID0gImlkZW50aXR5IiwgZmlsbCA9IGMoInN0ZWVsYmx1ZSIsICJyZWQiKSkgKw0KICBsYWJzKHggPSAiIiwgeSA9ICJBbnphaGwiLCB0aXRsZSA9ICJBbnphaGwgS3VuZGVuIG1pdCBEYXJsZWhlbiIpDQpgYGANCg0KRmFzdCBkb3BwZWx0IHNvIHZpZWxlIEvDpHVmZXIgd2llIE5pY2h0LUvDpHVmZXIgaGFiZW4gZWluIERhcmxlaGVuIGF1Zmdlbm9tbWVuLg0KDQojIE1vZGVsbGUNCg0KQWxzIG7DpGNoc3RlcyB3b2xsZW4gd2lyIE1vZGVsbGUgdHJhaW5pZXJlbiwgd2VsY2hlIEFuaGFuZCBkZXIgTWVya21hbGUgZGVyIEt1bmRlbiB2b3JoZXJzYWdlbiBzb2xsZW4sIG9iIGVpbiBLdW5kZSBlaW4gS8OkdWZlciBpc3Qgb2RlciBuaWNodC4NCkRpZXNlcyBNb2RlbGwgc29sbCBkYW5uIGdlYnJhdWNodCB3ZXJkZW4sIHVtIHp1IGVya2VubmVuLCB3ZWxjaGUgYmVzdGVoZW5kZW4gS3VuZGVuIG9obmUgS3JlZGl0a2FydGUgYW0gZWhlc3RlbiBlaW5lIGthdWZlbiB3w7xyZGVuLg0KDQojIyBGdW5rdGlvbmVuIHp1ciBFdmFsdWllcnVuZyB2b24gTW9kZWxsZW4NCg0KRGFtaXQgZGllIEV2YWx1aWVydW5nIHZvbiBNb2RlbGxlbiBuaWNodCByZWR1bmRhbnRlbiBDb2RlIGVudGjDpGx0LCB3aXJkIGhpZXIgdmVyc3VjaHQsIEZ1bmt0aW9uZW4genUgZXJzdGVsbGVuLCB3ZWxjaGUgYmVpIHZlcnNjaGllZGVuZW4gTW9kZWxsZW4gZ2VicmF1Y2h0IHdlcmRlbiBrw7ZubmVuLg0KDQojIyMgVHJhaW4tVGVzdC1TcGxpdA0KDQpBbHMgVm9yYmVyZWl0dW5nIGbDvHIgZGllIE1vZGVsbGUgbcO8c3NlbiB3aXIgdW5zZXJlIERhdGVuIHp1IFRyYWluaW5ncy0gdW5kIFRlc3RkYXRlbiB1bnRlcnRlaWxlbi4NCkRhZsO8ciBlcnN0ZWxsZW4gd2lyIGVpbmUgRnVua3Rpb24sIHdlbGNoZSBhdWYgdmVyc2NoaWVkZW5lbiBWYXJpYW50ZW4gZGVzIERhdGVuc2F0eiBnZWJyYXVjaHQgd2VyZGVuIGthbm4uDQoNCmBgYHtyfQ0Kc3BsaXRfZGF0YSA8LSBmdW5jdGlvbihkZiwgdGVzdF9zaXplID0gMC4yKSB7DQogIHNldC5zZWVkKDI3KQ0KICBkZiA8LSBkZltvcmRlcihkZiRpc3N1ZWQsIGRlY3JlYXNpbmcgPSBGQUxTRSksIF0NCiAgDQogICMgR2V0IG51bWJlciBvZiByb3dzIGluIHRoZSBkYXRhZnJhbWUNCiAgbl9yb3dzIDwtIG5yb3coZGYpDQoNCiMgQ2FsY3VsYXRlIHRoZSBudW1iZXIgb2Ygcm93cyBpbiB0aGUgdGVzdCBzZXQgKDIwJSBvZiB0aGUgdG90YWwgbnVtYmVyIG9mIHJvd3MpDQpuX3Rlc3Rfcm93cyA8LSBmbG9vcihuX3Jvd3MgKiAwLjIpDQoNCmRmJGlzc3VlZCA8LSBOVUxMDQoNCiMgQ3JlYXRlIHRoZSB0cmFpbiBhbmQgdGVzdCBzZXRzDQp0cmFpbiA8LSBoZWFkKGRmLCBuX3Jvd3MgLSBuX3Rlc3Rfcm93cykNCnRlc3QgPC0gdGFpbChkZiwgbl90ZXN0X3Jvd3MpDQogIA0KDQojc3BsaXQgPC0gY3JlYXRlRGF0YVBhcnRpdGlvbihkZiRoYXNfY2FyZCwgcCA9IDEgLSB0ZXN0X3NpemUsIGxpc3QgPSBGQUxTRSkNCiAjIHRyYWluIDwtIGRmW3NwbGl0LCBdDQogICN0ZXN0IDwtIGRmWy1zcGxpdCwgXQ0KDQojIGNyZWF0ZSBjdiBmb2xkcw0KICB0cmFpbl9zZXRzIDwtIGMoKQ0KICB2YWxfc2V0cyA8LSBjKCkNCg0KICBzZXQuc2VlZCgyNykNCiAgY3ZfZm9sZHMgPC0gdmZvbGRfY3YodHJhaW4sIHYgPSAxMCkNCiAgIyBJdGVyaWVyZSDDvGJlciBhbGxlIEZvbGRzDQogIGZvciAoaSBpbiAxOm5yb3coY3ZfZm9sZHMpKSANCiAgew0KICAgICMgV8OkaGxlIGRlbiBha3R1ZWxsZW4gVHJhaW5pbmdzLSB1bmQgVmFsaWRpZXJ1bmdzZGF0ZW5zYXR6IGF1cw0KICAgIHRyYWluX3NldCA8LSBjdl9mb2xkcyRzcGxpdHNbW2ldXSAlPiUgYW5hbHlzaXMoKQ0KICAgIHZhbF9zZXQgPC0gY3ZfZm9sZHMkc3BsaXRzW1tpXV0gJT4lIGFzc2Vzc21lbnQoKQ0KICANCiAgICAjIFNwZWljaGVyZSBkZW4gYWt0dWVsbGVuIFRyYWluaW5ncy0gdW5kIFZhbGlkaWVydW5nc2RhdGVuc2F0eiBpbiBkZW4gTGlzdGVuDQogICAgdHJhaW5fc2V0c1tbaV1dIDwtIHRyYWluX3NldA0KICAgIHZhbF9zZXRzW1tpXV0gPC0gdmFsX3NldA0KICB9DQogIA0KICByZXR1cm4obGlzdCh0cmFpbiA9IHRyYWluLCB0ZXN0ID0gdGVzdCwgY3ZfZm9sZHMgPSBjdl9mb2xkcywgdHJhaW5fc2V0cyA9IHRyYWluX3NldHMsIHZhbF9zZXRzID0gdmFsX3NldHMpKQ0KfQ0KYGBgDQoNCiMjIyBNZXRyaWtlbg0KDQpEYW1pdCB3aXIgZGllIHZlcnNjaGllZGVuZW4gTW9kZWxsZSBiZXNzZXIgZXZhbHVpZXJlbiBrw7ZubmVuLCBtw7xzc2VuIHdpciBkaWUgZ2xlaWNoZW4gS2VubnphaGxlbiB1bmQgQXVzd2VydHVuZ2VuIHBybyBNb2RlbGwgbWFjaGVuLg0KWnUgZGllc2VtIFp3ZWNrIGRlZmluaWVyZW4gd2lyIGVpbmlnZSBGdW5rdGlvbmVuLCBkYW1pdCB3aXIgd2VuaWdlciByZWR1bmRhbnRlbiBDb2RlIGhhYmVuIHVuZCB1bnNlcmUgRXJnZWJuaXNzZSBpbiBlaW5lbSBlaW5oZWl0bGljaGUsIHZlcmdsZWljaGJhcmVuIEZvcm1hdCBkYWhlcmtvbW1lbi4NCg0KRGFmw7xyIGVyc3RlbGxlbiB3aXIgZWluZSBGdW5rdGlvbiwgZGllIGRpZSBHZW5hdWlna2VpdCAoQWNjdXJhY3kpLCBDb2hlbidzIEthcHBhLCBNYXR0aGV3cyBLb3JyZWxhdGlvbiwgUHLDpHppc2lvbiAoUHJlY2lzaW9uKSwgRXJpbm5lcnVuZyAoUmVjYWxsKSB1bmQgZGVuIEYxLVNjb3JlIGbDvHIgZWluZSBSZWloZSB2b24gVm9yaGVyc2FnZW4gdW5kIGRlcmVuIGVudHNwcmVjaGVuZGVuIHdhaHJlbiBXZXJ0ZSBiZXJlY2huZXQuDQoNCldhcyBiZWRldXRlbiBkaWVzZSBLZW5uemFobGVuIGdlbmF1Pw0KDQpBY2N1cmFjeSAoR2VuYXVpZ2tlaXQpOiBEaWUgQWNjdXJhY3kgaXN0IGRlciBQcm96ZW50c2F0eiBkZXIgVm9yaGVyc2FnZW4sIGRpZSBtaXQgZGVuIHRhdHPDpGNobGljaGVuIFdlcnRlbiDDvGJlcmVpbnN0aW1tZW4uDQpTaWUgd2lyZCBiZXJlY2huZXQgYWxzIEFuemFobCBkZXIga29ycmVrdGVuIFZvcmhlcnNhZ2VuIGdldGVpbHQgZHVyY2ggZGllIEdlc2FtdHphaGwgZGVyIFZvcmhlcnNhZ2VuLg0KDQpDb2hlbidzIEthcHBhIChDb2hlbidzIEthcHBhKTogQ29oZW4ncyBLYXBwYSBpc3QgZWluZSBNZXNzZ3LDtsOfZSBmw7xyIGRpZSBRdWFsaXTDpHQgdm9uIGJpbsOkcmVuIEtsYXNzaWZpa2F0aW9uZW4uDQpFcyB3aXJkIHZlcndlbmRldCwgdW0gZGllIMOcYmVyZWluc3RpbW11bmcgendpc2NoZW4gendlaSBLbGFzc2lmaWthdG9yZW4genUgbWVzc2VuLCBpbmRlbSBlcyBkaWUgw5xiZXJlaW5zdGltbXVuZyDDvGJlciBkZXIgZXJ3YXJ0ZXRlbiDDnGJlcmVpbnN0aW1tdW5nIGR1cmNoIFp1ZmFsbCBiZXJlY2huZXQuDQpFaW4gS2FwcGEtV2VydCB2b24gMSBiZWRldXRldCBwZXJmZWt0ZSDDnGJlcmVpbnN0aW1tdW5nLCBlaW4gV2VydCB2b24gMCBiZWRldXRldCBrZWluZSDDnGJlcmVpbnN0aW1tdW5nLCBkaWUgYmVzc2VyIGlzdCBhbHMgWnVmYWxsLCB1bmQgZWluIFdlcnQgdm9uIC0xIGJlZGV1dGV0IGtvbXBsZXR0IGZhbHNjaGUgS2xhc3NpZmlrYXRpb25lbi4NCg0KTWF0dGhld3MgY29ycmVsYXRpb24gY29lZmZpY2llbnQgKE1hdHRoZXdzIEtvcnJlbGF0aW9uKTogRGVyIE1hdHRoZXdzIEtvcnJlbGF0aW9uIENvZWZmaWNpZW50IChNQ0MpIGlzdCBlaW5lIE1lc3NncsO2w59lIGbDvHIgZGllIFF1YWxpdMOkdCB2b24gYmluw6RyZW4gS2xhc3NpZmlrYXRpb25lbi4NCkVyIHJlaWNodCB2b24gLTEgYmlzIDEsIHdvYmVpIGVpbiBXZXJ0IHZvbiAxIHBlcmZla3RlIEtsYXNzaWZpa2F0aW9uIGJlZGV1dGV0LCBlaW4gV2VydCB2b24gMCBlaW5lIEtsYXNzaWZpa2F0aW9uLCBkaWUgbmljaHQgYmVzc2VyIGFscyBadWZhbGwgaXN0LCB1bmQgZWluIFdlcnQgdm9uIC0xIGVpbmUga29tcGxldHQgZmFsc2NoZSBLbGFzc2lmaWthdGlvbiBiZWRldXRldC4NCg0KUHJlY2lzaW9uIChQcsOkemlzaW9uKTogRGllIFByw6R6aXNpb24gaXN0IGRlciBQcm96ZW50c2F0eiBkZXIgVm9yaGVyc2FnZW4sIGRpZSB0YXRzw6RjaGxpY2gga29ycmVrdCB3YXJlbiwgdW50ZXIgZGVyIEFubmFobWUsIGRhc3MgYWxsZSBWb3JoZXJzYWdlbiBrb3JyZWt0IHNpbmQuDQpTaWUgd2lyZCBiZXJlY2huZXQgYWxzIEFuemFobCBkZXIga29ycmVrdGVuIFZvcmhlcnNhZ2VuIGbDvHIgZGllIHBvc2l0aXZlIEtsYXNzZSBnZXRlaWx0IGR1cmNoIGRpZSBHZXNhbXR6YWhsIGRlciBWb3JoZXJzYWdlbiBmw7xyIGRpZSBwb3NpdGl2ZSBLbGFzc2UuDQoNClJlY2FsbCAoRXJpbm5lcnVuZyk6IERlciBSZWNhbGwgaXN0IGRlciBQcm96ZW50c2F0eiBkZXIgdGF0c8OkY2hsaWNoIHBvc2l0aXZlbiBXZXJ0ZSwgZGllIGtvcnJla3Qgdm9yaGVyZ2VzYWd0IHd1cmRlbi4NCkVyIHdpcmQgYmVyZWNobmV0IGFscyBBbnphaGwgZGVyIGtvcnJla3RlbiBWb3JoZXJzYWdlbiBmw7xyIGRpZSBwb3NpdGl2ZSBLbGFzc2UgZ2V0ZWlsdCBkdXJjaCBkaWUgR2VzYW10emFobCBkZXIgdGF0c8OkY2hsaWNoIHBvc2l0aXZlbiBXZXJ0ZS4NCg0KRjEgc2NvcmUgKEYxLVdlcnQpOiBEZXIgRjEtV2VydCBpc3QgZWluIE1hw58gZsO8ciBkaWUgUXVhbGl0w6R0IHZvbiBiaW7DpHJlbiBLbGFzc2lmaWthdGlvbmVuLCBkYXMgZGllIEhhcm1vbmllc2NoZSBNaXNjaHVuZyB2b24gUHLDpHppc2lvbiB1bmQgUmVjYWxsIGRhcnN0ZWxsdC4NCkVzIHdpcmQgYmVyZWNobmV0IGFscyBkZXIgSGFybW9uaWVzY2hlIE1pdHRlbHdlcnQgdm9uIFByw6R6aXNpb24gdW5kIFJlY2FsbC4NCkVpbiBob2hlciBGMS1XZXJ0IGJlZGV1dGV0LCBkYXNzIHNvd29obCBQcsOkemlzaW9uIGFscyBhdWNoIFJlY2FsbCBob2NoIHNpbmQuDQoNCmBgYHtyfQ0KZ2V0X21ldHJpY3MgPC0gZnVuY3Rpb24ocHJlZGljdGlvbnMsIHRydWVfdmFsdWVzLCBtb2RlbF9uYW1lKSB7DQogICMgQ2FsY3VsYXRlIGFjY3VyYWN5DQogIGFjY3VyYWN5IDwtIHN1bShwcmVkaWN0aW9ucyA9PSB0cnVlX3ZhbHVlcykgLyBsZW5ndGgocHJlZGljdGlvbnMpDQogIA0KICAjIENhbGN1bGF0ZSBDb2hlbidzIGthcHBhDQogIG4gPC0gbGVuZ3RoKHByZWRpY3Rpb25zKQ0KICBvYnNlcnZlZF9hZ3JlZW1lbnQgPC0gc3VtKHByZWRpY3Rpb25zID09IHRydWVfdmFsdWVzKQ0KICBleHBlY3RlZF9hZ3JlZW1lbnQgPC0gc3VtKHByZWRpY3Rpb25zID09IHRydWVfdmFsdWVzKSAvIG4NCiAga2FwcGEgPC0gKG9ic2VydmVkX2FncmVlbWVudCAtIGV4cGVjdGVkX2FncmVlbWVudCkgLyAobiAtIGV4cGVjdGVkX2FncmVlbWVudCkNCiAgDQogICMgQ2FsY3VsYXRlIE1hdHRoZXdzIGNvcnJlbGF0aW9uIGNvZWZmaWNpZW50DQogIGNvbmZ1c2lvbl9tYXRyaXggPC0gdGFibGUocHJlZGljdGlvbnMsIHRydWVfdmFsdWVzKQ0KICB0cCA8LSBjb25mdXNpb25fbWF0cml4WzIsMl0NCiAgdG4gPC0gY29uZnVzaW9uX21hdHJpeFsxLDFdDQogIGZwIDwtIGNvbmZ1c2lvbl9tYXRyaXhbMiwxXQ0KICBmbiA8LSBjb25mdXNpb25fbWF0cml4WzEsMl0NCiAgbWF0dGhld3MgPC0gKHRwICogdG4gLSBmcCAqIGZuKSAvIHNxcnQoKHRwICsgZnApICogKHRwICsgZm4pICogKHRuICsgZnApICogKHRuICsgZm4pKQ0KICANCiAgIyBDYWxjdWxhdGUgcHJlY2lzaW9uIGFuZCByZWNhbGwNCiAgcHJlY2lzaW9uIDwtIGNvbmZ1c2lvbl9tYXRyaXhbMiwyXSAvIHN1bShjb25mdXNpb25fbWF0cml4WzIsXSkNCiAgcmVjYWxsIDwtIGNvbmZ1c2lvbl9tYXRyaXhbMiwyXSAvIHN1bShjb25mdXNpb25fbWF0cml4WywyXSkNCiAgDQogICMgQ2FsY3VsYXRlIEYxIHNjb3JlDQogIGYxIDwtIDIgKiAocHJlY2lzaW9uICogcmVjYWxsKSAvIChwcmVjaXNpb24gKyByZWNhbGwpDQogIA0KICAjIENyZWF0ZSBhIGRhdGEgZnJhbWUgb2YgdGhlIG1ldHJpY3MNCiAgbWV0cmljcyA8LSBkYXRhLmZyYW1lKG1vZGVsID0gbW9kZWxfbmFtZSwgYWNjdXJhY3kgPSBhY2N1cmFjeSwga2FwcGEgPSBrYXBwYSwgbWF0dGhld3MgPSBtYXR0aGV3cywNCiAgICAgICAgICAgICAgICAgICAgICAgIHByZWNpc2lvbiA9IHByZWNpc2lvbiwgcmVjYWxsID0gcmVjYWxsLCBmMSA9IGYxKQ0KICANCiAgIyBSZXR1cm4gdGhlIGRhdGEgZnJhbWUNCiAgcmV0dXJuKG1ldHJpY3MpDQp9DQpgYGANCg0KIyMjIEtvbmZ1c2lvbnNtYXRyaXggbWl0IFBsb3QNCg0KRGllc2UgRnVua3Rpb24gZXJzdGVsbHQgZWluZSBLb25mdXNpb25zbWF0cml4IHVuZCBnaWJ0IHNpZSBhbHMgUGxvdCB6dXLDvGNrLg0KDQpFaW5lIEtvbmZ1c2lvbnNtYXRyaXggaXN0IGVpbiB3aWNodGlnZXMgV2Vya3pldWcgenVyIEV2YWx1YXRpb24gdm9uIEtsYXNzaWZpa2F0aW9uc21vZGVsbGVuLg0KU2llIHplaWd0IGFuLCB3aWUgZ3V0IGRhcyBNb2RlbGwgaW4gZGVyIExhZ2UgaXN0LCBkaWUgdmVyc2NoaWVkZW5lbiBLbGFzc2VuIHJpY2h0aWcgenUgaWRlbnRpZml6aWVyZW4uDQpJbiBlaW5lciBLb25mdXNpb25zbWF0cml4IHdlcmRlbiBkaWUgdGF0c8OkY2hsaWNoZW4gdW5kIGRpZSB2b24gZGVtIE1vZGVsbCB2b3JoZXJnZXNhZ3RlbiBLbGFzc2VuIGdlZ2Vuw7xiZXJnZXN0ZWxsdC4NCkRpZSBNYXRyaXggaXN0IGluIHZpZXIgUXVhZHJhbnRlbiB1bnRlcnRlaWx0OiB0cnVlIHBvc2l0aXZlcyAoVFApLCB0cnVlIG5lZ2F0aXZlcyAoVE4pLCBmYWxzZSBwb3NpdGl2ZXMgKEZQKSB1bmQgZmFsc2UgbmVnYXRpdmVzIChGTikuDQpUUCBzaW5kIGRpZSBGw6RsbGUsIGluIGRlbmVuIGRhcyBNb2RlbGwgZGllIEtsYXNzZSByaWNodGlnIHZvcmhlcmdlc2FndCBoYXQsIFROIHNpbmQgZGllIEbDpGxsZSwgaW4gZGVuZW4gZGFzIE1vZGVsbCBkaWUgS2xhc3NlIHJpY2h0aWcgdm9yaGVyZ2VzYWd0IGhhdCB1bmQgZGllc2UgS2xhc3NlIGF1Y2ggdGF0c8OkY2hsaWNoIHZvcmxpZWd0LCBGUCBzaW5kIGRpZSBGw6RsbGUsIGluIGRlbmVuIGRhcyBNb2RlbGwgZWluZSBLbGFzc2Ugdm9yaGVyZ2VzYWd0IGhhdCwgZGllIGluIFdpcmtsaWNoa2VpdCBuaWNodCB2b3JsaWVndCwgdW5kIEZOIHNpbmQgZGllIEbDpGxsZSwgaW4gZGVuZW4gZGFzIE1vZGVsbCBlaW5lIEtsYXNzZSBuaWNodCB2b3JoZXJnZXNhZ3QgaGF0LCBkaWUgaW4gV2lya2xpY2hrZWl0IHZvcmxpZWd0Lg0KRWluZSBLb25mdXNpb25zbWF0cml4IGlzdCBoaWxmcmVpY2gsIHVtIGRpZSBHZW5hdWlna2VpdCwgU2Vuc2l0aXZpdMOkdCB1bmQgU3BlemlmaXTDpHQgZGVzIE1vZGVsbHMgenUgYmVyZWNobmVuIHVuZCB1bSB6dSBzZWhlbiwgYW4gd2VsY2hlbiBTdGVsbGVuIGRhcyBNb2RlbGwgU2Nod8OkY2hlbiBoYXQuDQpTaWUga2FubiBhdWNoIHZlcndlbmRldCB3ZXJkZW4sIHVtIGRpZSBMZWlzdHVuZyB2b24gdmVyc2NoaWVkZW5lbiBNb2RlbGxlbiBtaXRlaW5hbmRlciB6dSB2ZXJnbGVpY2hlbi4NCg0KYGBge3J9DQpwbG90X2NvbmZ1c2lvbl9tYXRyaXggPC0gZnVuY3Rpb24ocHJlZGljdGlvbnMsIHRydWVfdmFsdWVzLCB0aXRsZSA9ICIiKSB7DQogICMgRXJzdGVsbGUgZWluZSBDb25mdXNpb24gTWF0cml4IGFscyBEYXRhIEZyYW1lDQogIGNvbmZ1c2lvbl9tYXRyaXhfZGYgPC0gZGF0YS5mcmFtZShwcmVkaWN0aW9ucywgdHJ1ZV92YWx1ZXMpDQogIA0KICAjIFrDpGhsZSBkaWUgSMOkdWZpZ2tlaXRlbiBqZWRlciBLb21iaW5hdGlvbiB2b24gVm9yaGVyc2FnZS0gdW5kIFRydWUtV2VydGVuDQogIGNvdW50c19kZiA8LSBjb3VudChjb25mdXNpb25fbWF0cml4X2RmLCBwcmVkaWN0aW9ucywgdHJ1ZV92YWx1ZXMpDQogIA0KICAjIEVyc3RlbGxlIGVpbmVuIGdncGxvdC1QbG90DQogIGdncGxvdChkYXRhID0gY291bnRzX2RmLCBhZXMoeCA9IHByZWRpY3Rpb25zLCB5ID0gdHJ1ZV92YWx1ZXMpKSArDQogICAgZ2VvbV90aWxlKGFlcyhmaWxsID0gbikpICsNCiAgICBnZW9tX3RleHQoYWVzKGxhYmVsID0gbikpICsNCiAgICBzY2FsZV9maWxsX2dyYWRpZW50KGxvdyA9ICJ3aGl0ZSIsIGhpZ2ggPSAiZGFya2dyZWVuIikgKw0KICAgIGxhYnMoeCA9ICJQcmVkaWN0ZWQgQ2xhc3MiLCB5ID0gIlRydWUgQ2xhc3MiLCB0aXRsZSA9IHBhc3RlKCJDb25mdXNpb24gTWF0cml4IiwgdGl0bGUpKQ0KfQ0KYGBgDQoNCiMjIyBST0MgLyBBVUMNCg0KRGllc2UgRnVua3Rpb24gemVpY2huZXQgZGllIFJPQy1LdXJ2ZSB1bmQgYmVyZWNobmV0IGRpZSBBcmVhIHVuZCBDdXJ2ZS4NCg0KRGllIFJPQy1LdXJ2ZSAoUmVjZWl2ZXIgT3BlcmF0aW5nIENoYXJhY3RlcmlzdGljIGN1cnZlKSBpc3QgZWluIHdpY2h0aWdlcyBXZXJremV1ZyB6dXIgQmV3ZXJ0dW5nIHZvbiBLbGFzc2lmaWthdG9yZW4uDQpTaWUgemVpZ3QgZGllIExlaXN0dW5nIGRlcyBLbGFzc2lmaWthdG9ycyBiZWkgdmVyc2NoaWVkZW5lbiBTY2h3ZWxsZW53ZXJ0ZW4gYW4sIGRpZSB6dXIgVW50ZXJzY2hlaWR1bmcgendpc2NoZW4gendlaSBLbGFzc2VuIHZlcndlbmRldCB3ZXJkZW4uDQpEaWUgUk9DLUt1cnZlIGlzdCBiZXNvbmRlcnMgbsO8dHpsaWNoLCB3ZW5uIGRpZSBiZWlkZW4gS2xhc3NlbiBpbSBWZXJow6RsdG5pcyB1bmF1c2dlZ2xpY2hlbiBzaW5kLCB3aWUgZXMgb2Z0IGRlciBGYWxsIGlzdCwgd2VubiBlcyBkYXJ1bSBnZWh0LCBzZWx0ZW5lIEVyZWlnbmlzc2Ugd2llIEtyYW5raGVpdGVuIG9kZXIgQmV0cnVnIHp1IGVya2VubmVuLg0KDQpEaWUgUk9DLUt1cnZlIGlzdCBhdWYgZGVyIHgtQWNoc2UgZGVyIGZhbHNjaC1wb3NpdGl2LVJhdGUgKEZQUikgdW5kIGF1ZiBkZXIgeS1BY2hzZSBkZXIgd2Foci1wb3NpdGl2LVJhdGUgKFRQUikgYXVmZ2V0cmFnZW4uDQpEZXIgRlBSIGdpYnQgYW4sIHdpZSB2aWVsZSBmYWxzY2ggcG9zaXRpdmUgRXJnZWJuaXNzZSBlcyBnaWJ0LCB3w6RocmVuZCBkZXIgVFBSIGFuZ2lidCwgd2llIHZpZWxlIHdhaHIgcG9zaXRpdmUgRXJnZWJuaXNzZSBlcnppZWx0IHdlcmRlbi4NCkVpbiBwZXJmZWt0ZXIgS2xhc3NpZmlrYXRvciB3w7xyZGUgZWluZSBST0MtS3VydmUgaGFiZW4sIGRpZSBpbSBvYmVyZW4gbGlua2VuIEJlcmVpY2ggYmVnaW5udCB1bmQgbmFjaCByZWNodHMgb2JlbiB2ZXJsw6R1ZnQsIHdvYmVpIGFsbGUgRsOkbGxlIGtvcnJla3Qga2xhc3NpZml6aWVydCB3ZXJkZW4uDQpFaW4genVmw6RsbGlnZXIgS2xhc3NpZmlrYXRvciB3w7xyZGUgZWluZSBkaWFnb25hbCB2ZXJsYXVmZW5kZSBST0MtS3VydmUgaGFiZW4sIGRhIGRpZSBGUFIgdW5kIFRQUiB6dWbDpGxsaWcgdmVydGVpbHQgc2luZC4NCg0KRGllIEF1QyAoQXJlYSBVbmRlciB0aGUgQ3VydmUpIGlzdCBlaW5lIE1ldHJpaywgZGllIGF1cyBkZXIgUk9DLUt1cnZlIGJlcmVjaG5ldCB3aXJkIHVuZCBkaWUgTGVpc3R1bmcgZGVzIEtsYXNzaWZpa2F0b3JzIHp1c2FtbWVuZmFzc3QuDQpTaWUgZ2lidCBhbiwgd2llIGd1dCBkZXIgS2xhc3NpZmlrYXRvciBpbSBWZXJnbGVpY2ggenUgZWluZW0genVmw6RsbGlnZW4gS2xhc3NpZmlrYXRvciBpc3QuDQpFaW5lIEFVQyB2b24gMSBiZWRldXRldCwgZGFzcyBkYXMgTW9kZWxsIHBlcmZla3QgaW4gZGVyIExhZ2UgaXN0LCBwb3NpdGl2ZSB1bmQgbmVnYXRpdmUgS2xhc3NlbiB6dSB1bnRlcnNjaGVpZGVuLCB3w6RocmVuZCBlaW5lIEFVQyB2b24gMC41IGJlZGV1dGV0LCBkYXNzIGRhcyBNb2RlbGwga2VpbmUgYmVzc2VyZSBMZWlzdHVuZyBhbHMgWnVmYWxsIGVyemllbHQuDQpEaWUgQVVDIGthbm4gV2VydGUgendpc2NoZW4gMCB1bmQgMSBhbm5laG1lbi4NCkVpbmUgQVVDIHZvbiAwIGJlZGV1dGV0LCBkYXNzIGRhcyBNb2RlbGwgdsO2bGxpZyBpbmtvcnJla3QgaXN0Lg0KSW0gQWxsZ2VtZWluZW4gZ2lsdCwgamUgZ3LDtsOfZXIgZGllIEFVQywgZGVzdG8gYmVzc2VyIGlzdCBkYXMgTW9kZWxsIGltIFZlcmdsZWljaCB6dSBhbmRlcmVuIE1vZGVsbGVuLg0KDQpgYGB7cn0NCm1ha2Vfcm9jX3Bsb3RfYW5kX2dldF9hdWMgPC0gZnVuY3Rpb24ocHJlZGljdGlvbnMsIHRydWVfdmFsdWVzKQ0Kew0KICByb2NfY3VydmUgPC0gcm9jKHJlc3BvbnNlID0gKGFzLm51bWVyaWModHJ1ZV92YWx1ZXMpIC0gMSksICBwcmVkaWN0b3IgPSBhcy5udW1lcmljKHByZWRpY3Rpb25zKSkNCiAgYXVjX3Njb3JlIDwtIGF1Yyhyb2NfY3VydmUpDQogIA0KICBwbG90KHJvY19jdXJ2ZSwgeGxhYiA9ICJGYWxzZSBQb3NpdGl2ZSBSYXRlIiwgeWxhYiA9ICJUcnVlIFBvc2l0aXZlIFJhdGUiLCBtYWluID0iUk9DIEN1cnZlIikNCiAgbGVnZW5kKHggPSAiYm90dG9tcmlnaHQiLCBsZWdlbmQ9YyhwYXN0ZSgiQVVDOiIsIGF1Y19zY29yZSkpKQ0KfQ0KYGBgDQoNCiMjIyBUaHJlc2hvbGQgUGxvdA0KDQpgYGB7cn0NCg0KZmluZF9iZXN0X3RocmVzaG9sZCA8LSBmdW5jdGlvbihwcmVkaWN0aW9ucywgYWN0dWFsX3ZhbHVlcykgew0KICBiZXN0X3RocmVzaG9sZCA8LSAwDQogIGJlc3RfZjEgPC0gMA0KICB0aHJlc2hvbGRzIDwtIHNlcSgwLjAxLCAwLjk5LCAwLjAxKQ0KICBmMV9zY29yZXMgPC0gcmVwKDAsIGxlbmd0aCh0aHJlc2hvbGRzKSkNCg0KICBmb3IgKGkgaW4gMTpsZW5ndGgodGhyZXNob2xkcykpIHsNCiAgICAjIFNldCB0aGUgdGhyZXNob2xkIGZvciB0aGUgcHJlZGljdGlvbnMNCiAgICBwcmVkaWN0aW9uc190aHJlc2hvbGQgPC0gaWZlbHNlKHByZWRpY3Rpb25zID4gdGhyZXNob2xkc1tpXSwgVFJVRSwgRkFMU0UpDQogIA0KICAgIGlmIChhbGwocHJlZGljdGlvbnNfdGhyZXNob2xkKSkgew0KICAgICAgbmV4dA0KICAgIH0gZWxzZSBpZiAoYWxsKCFwcmVkaWN0aW9uc190aHJlc2hvbGQpKSB7DQogICAgICBuZXh0DQogICAgfQ0KICAgICMgQ2FsY3VsYXRlIHRoZSBmMQ0KICAgIGYxIDwtIGdldF9tZXRyaWNzKHByZWRpY3Rpb25zX3RocmVzaG9sZCwgYWN0dWFsX3ZhbHVlcywgImJlc3QgdGhyZXNob2xkIikkZjENCiAgDQogICAgZjFfc2NvcmVzW2ldIDwtIGYxDQogIA0KICAgICMgVXBkYXRlIHRoZSBiZXN0IHRocmVzaG9sZCBhbmQgYmVzdCBmMSBpZiBuZWNlc3NhcnkNCiAgICBpZiAoZjEgPiBiZXN0X2YxKSB7DQogICAgICBiZXN0X3RocmVzaG9sZCA8LSB0aHJlc2hvbGRzW2ldDQogICAgICBiZXN0X2YxIDwtIGYxDQogICAgfQ0KICB9DQoNCiAgIyBEaXNwbGF5IHRoZSBiZXN0IHRocmVzaG9sZCBhbmQgYmVzdCByZWNhbGwNCiAgcHJpbnQocGFzdGUoIkJlc3QgdGhyZXNob2xkOiIsIGJlc3RfdGhyZXNob2xkKSkNCiAgcHJpbnQocGFzdGUoIkJlc3QgRjE6IiwgYmVzdF9mMSkpDQoNCiAgcGxvdCh0aHJlc2hvbGRzLCBmMV9zY29yZXMsIHR5cGUgPSAibCIsIHhsYWIgPSAiVGhyZXNob2xkIiwgeWxhYiA9ICJGMSBTY29yZSIsIG1haW4gPSAiRjEgU2NvcmUgd2l0aCBkaWZmZXJlbnQgdGhyZXNob2xkcyIpDQoNCiAgcmV0dXJuKGJlc3RfdGhyZXNob2xkKQ0KfQ0KYGBgDQoNCiMjIFZvcmdlaGVuDQoNClVtIGVpbiBnZWVpZ25ldHMgTW9kZWxsIHp1IGZpbmRlbiwgd2VyZGVuIHdpciB2ZXJzY2hpZWRlbmUgTW9kZWxsLUFsb2dpcnRobWVuIGF1ZiBkZW4gVHJhaW5pbmdzZGF0ZW4gYW56dXdlbmRlbiB1bmQgdmVyc3VjaGVuLCBkaWVzZSB6dSBvcHRpbWllcmVuLg0KV2lyIHN0YXJ0ZW4gZGFiZWkgbWl0IGVpbmVtIHZvcmdlZ2ViZW5lbiBCYXNlbGluZSBNb2RlbGwuDQpKZWRlcyBNb2RlbGwgc2NoYXVlbiB3aXIga3VyeiBpbmRpdmlkdWVsbCBhbi4NCkFtIFNjaGx1c3Mgd2VyZGVuIGRpZSB2ZXJzY2hpZWRlbmVuIE1vZGVsbGUgbm9jaG1hbHMgZ2VzYW10aGFmdCBtaXRlaW5hbmRlciB2ZXJnbGljaGVuLg0KRGFiZWkgc2NoYXVlbiB3aXIgdmVyc2NoaWVkZW5lIE1ldHJpa2VuLCBUb3AtTi1MaXN0ZW4sIEZlYXR1cmUtSW1wb3J0YW5jZSB1bmQgd2VpdGVyZSBJbmZvcm1hdGlvbmVuIHdpZSBkaWUgUk9DLUt1cnZlIG9kZXIgS29uZnVzaW9uc21hdHJpemVuLg0KRGllc2UgSW5mb3JtYXRpb25lbiBlcmhhbHRlbiB3aXIgw7xiZXIgMTAtZmFjaGUtS3JldXp2YWxpZGllcnVuZy4NCldpciB0cmFpbmllcmVuIGFsc28gamVkZXMgTW9kZWxsIDEwIE1hbCBtaXQgdmVyc2NoaWVkZW5lbiA5MCUgZGVyIFRyYWluaW5nc2RhdGVuIHVuZCBiZXJlY2huZW4gdW5zZXJlIE1ldHJpa2VuIHVuZCB3ZWl0ZXJlbiBJbmZvcm1hdGlvbmVuIGF1ZiBkZW4gcmVzdGxpY2hlbiAxMCUuDQoNCkRvY2ggd2VsY2hlIE1ldHJpayBpbiB1bnNlcmVyIExpc3RlIGlzdCBkaWUgcmVsZXZhbnRlc3RlIGbDvHIgdW5zPw0KQmVpbSBNb2RlbGwgZ2VodCBlcyBkYXJ1bSwgS3VuZGVuIHp1IGZpbmRlbiwgd2VsY2hlIGFtIGVoZXN0ZW4gZWluZSBLcmVkaXRrYXJ0ZSBrYXVmZW4gd8O8cmRlbi4NCkRpZXNlbiBLdW5kZW4gd8O8cmRlbiBkYW5uIGbDvHIgZGllIEJhbmsgaW50ZXJlc3NhbnQgd2VyZGVuIHVuZCBlaW5lIGdld2lzc2UgTWFzc25haG1lIHfDvHJkZSBlcmdyaWZmZW4gd2VyZGVuLCBzZWkgZXMgZGFzIFNjaGlja2VuIGVpbmVyIFdlcmJ1bmcgb2RlciBkYXMgVW50ZXJicmVpdGVuIGVpbmVzIEFuZ2Vib3RzLg0KRGEgZGllcyBtaXQgZWluZW0gemVpdGxpY2hlbiBBdWZ3YW5kIHZlcmJ1bmRlbiBpc3QgdW5kIEt1bmRlbiwgd2VsY2hlIGVpbiBzb2xjaGVzIEFuZ2Vib3Qgb2RlciBlaW5lIFdlcmJ1bmcgYmVrb21tZW4gYWJlciBrZWluIEludGVyZXNzZSBoYWJlbiwgZWhlciBnZW5lcnZ0IGRhdm9uIHdlcmRlbiB3w7xyZGVuLCBzb2xsZW4gZGllIHZvbSBNb2RlbGwgYWxzIHBvc2l0aXYga2xhc3NpZml6aWVydGVuIEbDpGxsZSBtw7ZnbGljaHN0IHRhdHPDpGNobGljaCBwb3NpdGl2IHNlaW4uDQpEYWhlciBzY2hhdWVuIHdpciBiZWkgZGVuIE1vZGVsbGVuIHZvciBhbGxlbSBhdWYgZGllIFByZWNpc2lvbi4NCg0KIyMjIEJhc2VsaW5lIE1vZGVsbA0KDQpBbHMgZXJzdGVzIHNvbGwgZWluZSBsb2dpc3Rpc2NoZSBSZWdyZXNzaW9uIG1pdCBkZW4gSW5mb3JtYXRpb25lbiBBbHRlciwgR2VzY2hsZWNodCwgRG9taXppbHJlZ2lvbiwgVmVybcO2Z2VuIChiYWxhbmNlLVNjaG5pdHQgw7xiZXIgYWxsZSBNb25hdGUpIHVuZCBVbXNhdHogKGRpZmZlcmVuY2UtU2Nobml0dCDDvGJlciBhbGxlIE1vbmF0ZSkgYWxzIEJhc2VsaW5lIE1vZGVsbCBlcnN0ZWxsdCB3ZXJkZW4uRGFmw7xyIG3DvHNzZW4gd2lyIGt1cnogZWluIG5ldWVzIERhdGFmcmFtZSBlcnN0ZWxsZW4uDQoNCmBgYHtyfQ0KYmFzZWxpbmVfZGF0YSA8LSBmaW5hbF9kZg0KYmFzZWxpbmVfZGF0YSRtZWFuX2JhbGFuY2UgPC0gcm93TWVhbnMoZmluYWxfZGZbLCBjKCJtZWFuX2JhbGFuY2VfMSIsICJtZWFuX2JhbGFuY2VfMiIsICJtZWFuX2JhbGFuY2VfMyIsICJtZWFuX2JhbGFuY2VfNCIsIA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgIm1lYW5fYmFsYW5jZV81IiwgIm1lYW5fYmFsYW5jZV82IiwgIm1lYW5fYmFsYW5jZV83IiwgIm1lYW5fYmFsYW5jZV84IiwgDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAibWVhbl9iYWxhbmNlXzkiLCAibWVhbl9iYWxhbmNlXzEwIiwgIm1lYW5fYmFsYW5jZV8xMSIsICJtZWFuX2JhbGFuY2VfMTIiKV0pDQpiYXNlbGluZV9kYXRhJG1lYW5fZGlmZmVyZW5jZSA8LSByb3dNZWFucyhmaW5hbF9kZlssIGMoIm1lYW5fZGlmZmVyZW5jZV8xIiwgIm1lYW5fZGlmZmVyZW5jZV8yIiwgIm1lYW5fZGlmZmVyZW5jZV8zIiwgIm1lYW5fZGlmZmVyZW5jZV80IiwgDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICJtZWFuX2RpZmZlcmVuY2VfNSIsICJtZWFuX2RpZmZlcmVuY2VfNiIsICJtZWFuX2RpZmZlcmVuY2VfNyIsICJtZWFuX2RpZmZlcmVuY2VfOCIsIA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgICAibWVhbl9kaWZmZXJlbmNlXzkiLCAibWVhbl9kaWZmZXJlbmNlXzEwIiwgIm1lYW5fZGlmZmVyZW5jZV8xMSIsICJtZWFuX2RpZmZlcmVuY2VfMTIiKV0pDQpiYXNlbGluZV9kYXRhIDwtIGJhc2VsaW5lX2RhdGFbLCBjKCJhZ2UiLCAiZ2VuZGVyIiwgInJlZ2lvbiIsICJoYXNfY2FyZCIsICJtZWFuX2JhbGFuY2UiLCAibWVhbl9kaWZmZXJlbmNlIiwgImlzc3VlZCIpXQ0KYmFzZWxpbmVfZGF0YSRoYXNfY2FyZCA8LSBhcy5mYWN0b3IoYmFzZWxpbmVfZGF0YSRoYXNfY2FyZCkNCmBgYA0KDQpEYXJhdWYgd2lyZCBlaW4gVHJhaW4tVGVzdC1TcGxpdCBtaXQgODAlIFRyYWluaW5nc2RhdGVuIHVuZCAyMCUgVGVzdGRhdGVuIGdlYnJhdWNodC4NCg0KYGBge3J9DQpzcGxpdHMgPC0gc3BsaXRfZGF0YShiYXNlbGluZV9kYXRhLCB0ZXN0X3NpemUgPSAwLjIpDQp0cmFpbiA8LSBzcGxpdHMkdHJhaW4NCnRlc3QgPC0gc3BsaXRzJHRlc3QNCnRyYWluX3NldHMgPC0gc3BsaXRzJHRyYWluX3NldHMNCnZhbF9zZXRzIDwtIHNwbGl0cyR2YWxfc2V0cw0KYGBgDQoNCkRhcyBSZWdyZXNzaW9uc21vZGVsbCB3aXJkIGF1ZiBkZW4gVHJhaW5pbmdzZGF0ZW4gdHJhaW5pZXJ0Lg0KV2lyIHZlcndlbmRlbiBkaWUgRnVua3Rpb24gZ2xtIHZvbiBkZXIgTGlicmFyeSAic3RhdHMiLg0KQmVpIGplZGVtIE1vZGVsbCBtw7xzc2VuIGRpZSBQcmVkaWN0aW9ucyBnZW1hY2h0IHVuZCBkYW1pdCBkaWUgTWV0cmlrZW4gZXJzdGVsbHQgd2VyZGVuLg0KRGEgZGllIGxvZ2lzdGlzY2hlIFJlZ3Jlc3Npb24gZWluZSBaYWhsIHp3aXNjaGVuIDAgdW5kIDEgenVyw7xja2dpYnQsIG3DvHNzZW4gd2lyIGFuaGFuZCBlaW5lcyBUaHJlc2hvbGRzIGRpZSBXZXJ0ZSB6dSBUUlVFIHVuZCBGQUxTRSB1bXdhbmRlbG4uDQpEZXIgVGhyZXNob2xkIGdpYnQgYW4sIGFiIHdlbGNoZW0gV2VydCBlaW5lIFZvcmhlcnNhZ2UgYWxzIHBvc2l0aXYgYmV0cmFjaHRldCB3aXJkLg0KU3RhbmRhcmRtw6TDn2lnIGlzdCBkZXIgVGhyZXNob2xkIGF1ZiAwLjUgZ2VzZXR6dCwgd2FzIGJlZGV1dGV0LCBkYXNzIGFsbGUgS3VuZGVuIG1pdCBlaW5lbSBXZXJ0IGdyw7Zzc2VyIGFscyAwLjUgYWxzIEthcnRlbmvDpHVmZXIgYmV0cmFjaHRldCB3ZXJkZW4uRGllIFdlcnRlIGbDvHIgamVkZSBWYWxpZGllcnVuZyB3ZXJkZW4gaW4gZWluZXIgTGlzdGUgZ2VzcGVpY2hlcnQuDQpBbHMgZXJzdGVzIHdvbGxlbiB3aXIgdW5zIGRpZSBkdXJjaHNjaG5pdHRsaWNoZW4gTWV0cmlrZW4gYW5zY2hhdWVuLg0KDQpgYGB7cn0NCnJlZ3Jlc3Npb25fYmFzZWxpbmVfbWV0cmljcyA8LSBsaXN0KCkNCnJlZ3Jlc3Npb25fYmFzZWxpbmVfcHJlZGljdGlvbnMgPC0gbGlzdCgpDQpyZWdyZXNzaW9uX2Jhc2VsaW5lX3ByZWRpY3Rpb25zX3RocmVzaG9sZCA8LSBsaXN0KCkNCg0KZm9yKGkgaW4gMTpsZW5ndGgodmFsX3NldHMpKSB7DQogIA0KICByZWdyZXNzaW9uX2Jhc2VsaW5lIDwtIGdsbShoYXNfY2FyZCB+IC4sIGRhdGEgPSB0cmFpbl9zZXRzW1tpXV0sIGZhbWlseSA9IGJpbm9taWFsKQ0KICANCiAgcmVncmVzc2lvbl9iYXNlbGluZV9wcmVkaWN0aW9uc1tbaV1dIDwtIHByZWRpY3QocmVncmVzc2lvbl9iYXNlbGluZSwgdmFsX3NldHNbW2ldXSwgdHlwZSA9ICJyZXNwb25zZSIpDQogIA0KICB0aHJlc2hvbGQgPC0gMC41DQogIA0KICByZWdyZXNzaW9uX2Jhc2VsaW5lX3ByZWRpY3Rpb25zX3RocmVzaG9sZFtbaV1dIDwtIGlmZWxzZShyZWdyZXNzaW9uX2Jhc2VsaW5lX3ByZWRpY3Rpb25zW1tpXV0gPiB0aHJlc2hvbGQsIFRSVUUsIEZBTFNFKQ0KDQogIHJlZ3Jlc3Npb25fYmFzZWxpbmVfbWV0cmljc1tbaV1dIDwtIGdldF9tZXRyaWNzKHJlZ3Jlc3Npb25fYmFzZWxpbmVfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpXV0sIHZhbF9zZXRzW1tpXV0kaGFzX2NhcmQsICJMb2dpc3RpYyBSZWdyZXNzaW9uIEJhc2VsaW5lIikNCn0NCg0KDQpyZWdyZXNzaW9uX2Jhc2VsaW5lX21ldHJpY3MgPC0gZG8uY2FsbCgicmJpbmQiLCByZWdyZXNzaW9uX2Jhc2VsaW5lX21ldHJpY3MpDQptZXRyaWNzX2FsbCA8LSByZWdyZXNzaW9uX2Jhc2VsaW5lX21ldHJpY3MNCg0KY29sTWVhbnMocmVncmVzc2lvbl9iYXNlbGluZV9tZXRyaWNzICU+JSBzZWxlY3QoLW1vZGVsKSkNCg0KI3JlZ3Jlc3Npb25fYmFzZWxpbmVfZXhwbGFpbmVyIDwtIGV4cGxhaW4ocmVncmVzc2lvbl9iYXNlbGluZSwgZGF0YSA9IHRyYWluKQ0KYGBgDQoNClVtIGRpZSBLb25mdXNpb25zbWF0cml4IGFuenV6ZWlnZW4gYmVyZWNobmVuIHdpciBkZW4gU2Nobml0dCBkZXMgV2VydGVzIGRlciBsb2dpc3Rpc2NoZW4gUmVncmVzc2lvbiBmw7xyIGplZGVuIEt1bmRlbg0KDQpgYGB7cn0NCmlkX3NldCA8LSAxMA0KDQpwbG90X2NvbmZ1c2lvbl9tYXRyaXgocmVncmVzc2lvbl9iYXNlbGluZV9wcmVkaWN0aW9uc190aHJlc2hvbGRbW2lkX3NldF1dLCB2YWxfc2V0c1tbaWRfc2V0XV0kaGFzX2NhcmQpDQpgYGANCg0KYGBge3J9DQptYWtlX3JvY19wbG90X2FuZF9nZXRfYXVjKHJlZ3Jlc3Npb25fYmFzZWxpbmVfcHJlZGljdGlvbnNbW2lkX3NldF1dLCB2YWxfc2V0c1tbaWRfc2V0XV0kaGFzX2NhcmQpDQpgYGANCg0KIyMjIFJlZ3Jlc3Npb25zbW9kZWxsIG1pdCBhbGxlbiBEYXRlbg0KDQpOdW4gc29sbCBkaWVzZXMgQmFzZWxpbmUtTW9kZWxsIHZlcmJlc3NlcnQgd2VyZGVuLg0KQWxzIGVyc3RlcyBwcm9iaWVyZW4gd2lyLCBkYXMgZ2xlaWNoZSBNb2RlbGwgKExvZ2lzdGlzY2hlIFJlZ3Jlc3Npb24pIG1pdCBtZWhyIElucHV0LVBhcmFtZXRlcm4genUgdHJhaW5pZXJlbi4NCg0KRGEgZGllIGxvZ2lzdGlzY2hlIFJlZ3Jlc3Npb24gUHJvYmxlbWUgbWl0IEZha3RvcmVuIGhhdCwgd2VsY2hlIG51ciBpbSBUcmFpbmluZ3MtIGJ6dy4NClRlc3RkYXRlbnNhdHogdm9ya29tbWVuIHVuZCBhdWNoIG5pY2h0IGd1dCBtaXQgTkEncyB1bWdlaGVuIGthbm4sIG3DvHNzZW4gd2lyIHp1ZXJzdCBub2NoIGVpbmlnZSBBbnBhc3N1bmdlbiBhbSBEYXRlbnNhdHogdm9ybmVobWVuLg0KDQpBbHMgZXJzdGVzIGVudGZlcm5lbiB3aXIgYWxsZSBLb2xvbm5lbiwgd2VsY2hlIEZha3RvcmVuIHNpbmQgdW5kIG1laHIgYWxzIDEwIHZlcnNjaGllZGVuZSBBdXNwcsOkZ3VuZ2VuIGhhYmVuLg0KDQpgYGB7cn0NCiMgRXJtaXR0bGUgZGllIG51bWVyaXNjaGVuIE1lcmttYWxlIGluIGRlbiBUcmFpbmluZ3NkYXRlbg0KbnVtZXJpY192YXJzIDwtIHNhcHBseShmaW5hbF9kZiwgaXMubnVtZXJpYykNCg0KIyBFcnN0ZWxsZSBlaW4gU3Vic2V0IGRlciBUcmFpbmluZ3NkYXRlbiBvaG5lIGRpZSBudW1lcmlzY2hlbiBNZXJrbWFsZQ0KdHJhaW5fbm9fbnVtZXJpYyA8LSBmaW5hbF9kZlssICFudW1lcmljX3ZhcnNdDQoNCiMgRXJtaXR0bGUgZGllIEFuemFobCBkZXIgS2F0ZWdvcmllbiBmw7xyIGplZGVzIE1lcmttYWwNCm51bV9jYXRlZ29yaWVzIDwtIHNhcHBseSh0cmFpbl9ub19udW1lcmljLCBmdW5jdGlvbih4KSBsZW5ndGgodW5pcXVlKHgpKSkNCg0KIyDDnGJlcnByw7xmZSwgb2IgZWluIE1lcmttYWwgenUgdmllbGUgS2F0ZWdvcmllbiBoYXQNCnRvb19tYW55X2NhdGVnb3JpZXMgPC0gbnVtX2NhdGVnb3JpZXMgPiAxMA0KDQojIEdpYiBkaWUgTmFtZW4gZGVyIE1lcmttYWxlIGF1cywgZGllIHp1IHZpZWxlIEthdGVnb3JpZW4gaGFiZW4NCmNvbHVtbnNfdG9fcmVtb3ZlIDwtIGNvbG5hbWVzKHRyYWluX25vX251bWVyaWMpW3Rvb19tYW55X2NhdGVnb3JpZXNdDQoNCg0KIyBFcm1pdHRsZSBkaWUgU3BhbHRlbm5hbWVuLCBkaWUgYmVoYWx0ZW4gd2VyZGVuIHNvbGxlbg0Ka2VlcF9jb2x1bW5zIDwtIHNldGRpZmYoY29sbmFtZXMoZmluYWxfZGYpLCBjb2x1bW5zX3RvX3JlbW92ZSkNCg0KIyBFcnN0ZWxsZSBlaW4gU3Vic2V0IGRlcyBEYXRhZnJhbWVzIG1pdCBkZW4gYmVoYWx0ZW5lbiBTcGFsdGVubmFtZW4NCmZpbmFsX2RmX3NpbXBsaWZpZWQgPC0gZmluYWxfZGZbLCBrZWVwX2NvbHVtbnNdDQoNCmNvbHVtbnNfdG9fcmVtb3ZlDQpgYGANCg0KTnVuIG11c3MgZGVyIERhdGVuc2F0eiBub2NoIGF1ZiBOQSdzIMO8YmVycHLDvGZ0IHdlcmRlbi4NCg0KYGBge3J9DQojIENvdW50IHRoZSBudW1iZXIgb2YgTkEgdmFsdWVzIGluIHRoZSBkYXRhIGZyYW1lDQpudW1fbmEgPC0gc3VtKGlzLm5hKGZpbmFsX2RmX3NpbXBsaWZpZWQpKQ0KDQojIFByaW50IHRoZSB0b3RhbCBudW1iZXIgb2YgTkEgdmFsdWVzDQpwcmludChwYXN0ZSgiVG90YWwgbnVtYmVyIG9mIE5BIHZhbHVlczoiLCBudW1fbmEpKQ0KDQojIENyZWF0ZSBhIGxvZ2ljYWwgdmVjdG9yIGluZGljYXRpbmcgd2hldGhlciBlYWNoIGVsZW1lbnQgaXMgTkENCm5hX21hdHJpeCA8LSBpcy5uYShmaW5hbF9kZl9zaW1wbGlmaWVkKQ0KDQojIFN1bSB0aGUgbnVtYmVyIG9mIE5BIHZhbHVlcyBwZXIgcm93DQpuYV9jb3VudHMgPC0gcm93U3VtcyhuYV9tYXRyaXgpDQoNCiMgQ291bnQgdGhlIHJvd3Mgd2l0aCBOQSB2YWx1ZXMNCm51bV9uYV9yb3dzIDwtIHN1bShuYV9jb3VudHMgPiAwKQ0KDQojIFByaW50IHRoZSBudW1iZXIgb2Ygcm93cyB3aXRoIE5BIHZhbHVlcw0KcHJpbnQocGFzdGUoIk51bWJlciBvZiByb3dzIHdpdGggTkEgdmFsdWVzOiIsIG51bV9uYV9yb3dzKSkNCg0KIyBTdW0gdGhlIG51bWJlciBvZiBOQSB2YWx1ZXMgcGVyIGNvbHVtbg0KbmFfY291bnRzX2NvbHMgPC0gY29sU3VtcygobmFfbWF0cml4KSkNCg0KIyBDb3VudCB0aGUgY29sdW1ucyB3aXRoIE5BIHZhbHVlcw0KbnVtX25hX2NvbHMgPC0gc3VtKG5hX2NvdW50c19jb2xzID4gMCkNCg0KIyBQcmludCB0aGUgbnVtYmVyIG9mIGNvbHVtbnMgd2l0aCBOQSB2YWx1ZXMNCnByaW50KHBhc3RlKCJOdW1iZXIgb2YgY29sdW1ucyB3aXRoIE5BIHZhbHVlczoiLCBudW1fbmFfY29scykpDQpgYGANCg0KRmFzdCBqZWRlIFplaWxlIGhhdCBpcmdlbmR3byBlaW4gTkEuDQpFcyBzaW5kIGF1Y2ggdmllbGUgS29sb25uZW4gYmV0cm9mZmVuLg0KV2lyIGvDtm5uZW4gYWxzbyBuaWNodCBhbGxlIE9ic2VydmF0aW9uZW4gb2RlciBWYXJpYWJlbG4gbWl0IE5BJ3MgZW50ZmVybmVuLCBkYSBzb25zdCBkZXIgRGF0ZW52ZXJsdXN0IHNlaHIgZ3Jvc3Mgd8OkcmUuDQpEYWhlciBpbXB1dGllcmVuIHdpciBkaWUgbnVtZXJpc2NoZW4gZmVobGVuZGVuIFdlcnRlIG1pdCBkZW0gTWVkaWFuIHVuZCBkaWUgZmVobGVuZGVuIGthdGVnb3JpYWxlbiBXZXJ0ZSBtaXQgZGVtIFdlcnQsIHdlbGNoZXIgYW0gbWVpc3RlbiB2b3Jrb21tdC4NCg0KYGBge3J9DQojIEltcHV0ZSBOQSBudW1iZXJzIHdpdGggdGhlIG1lZGlhbg0KZmluYWxfZGZfc2ltcGxpZmllZCA8LSBmaW5hbF9kZl9zaW1wbGlmaWVkICU+JSANCiAgbXV0YXRlX2lmKGlzLm51bWVyaWMsIGxpc3QofiBpZl9lbHNlKGlzLm5hKC4pLCBtZWRpYW4oLiwgbmEucm0gPSBUUlVFKSwgYXMuZG91YmxlKC4pKSkpDQoNCiMgSW1wdXRlIE5BIHN0cmluZ3MvZmFjdG9ycyB3aXRoIHRoZSBtb3N0IGNvbW1vbiB2YWx1ZQ0KZmluYWxfZGZfc2ltcGxpZmllZCA8LSBmaW5hbF9kZl9zaW1wbGlmaWVkICU+JSANCiAgbXV0YXRlX2lmKGlzLmNoYXJhY3RlciwgbGlzdCh+IGlmX2Vsc2UoaXMubmEoLiksIG1vZGUoLiksIC4pKSkNCmBgYA0KDQpXaXIgw7xiZXJwcsO8ZmVuIG5vY2htYWxzLCBvYiBlcyBrZWluZSBmZWhsZW5kZW4gV2VydGUgbWVociBnaWJ0Lg0KDQpgYGB7cn0NCnN1bShpcy5uYShmaW5hbF9kZl9zaW1wbGlmaWVkKSkNCmBgYA0KDQpEYSBkYXMgS2F1ZmRhdHVtIGbDvHIgZGVuIFNwbGl0IGJlbsO2dGlndCB3aXJkIGFiZXIgdm9yaGVyIGVudGZlcm50IHd1cmRlLCBkYSBlcyBtZWhyIGFscyAxMCB2ZXJzY2hpZWRlbmUgQXVzcHLDpGd1bmdlbiBhbm5laG1lbiBrYW5uLCBmw7xnZW4gd2lyIGVzIGhpZXIgbm9jaG1hbHMgenVtIG5ldWVuIERhdGVuc2F0eiBoaW56dS4NCg0KYGBge3J9DQpmaW5hbF9kZl9zaW1wbGlmaWVkJGlzc3VlZCA8LSBmaW5hbF9kZiRpc3N1ZWQNCmBgYA0KDQpgYGB7cn0NCnNwbGl0cyA8LSBzcGxpdF9kYXRhKGZpbmFsX2RmX3NpbXBsaWZpZWQsIHRlc3Rfc2l6ZSA9IDAuMikNCnRyYWluIDwtIHNwbGl0cyR0cmFpbg0KdGVzdCA8LSBzcGxpdHMkdGVzdA0KdHJhaW5fc2V0cyA8LSBzcGxpdHMkdHJhaW5fc2V0cw0KdmFsX3NldHMgPC0gc3BsaXRzJHZhbF9zZXRzDQpgYGANCg0KYGBge3J9DQpyZWdyZXNzaW9uX2FsbF9tZXRyaWNzIDwtIGxpc3QoKQ0KcmVncmVzc2lvbl9hbGxfcHJlZGljdGlvbnMgPC0gbGlzdCgpDQpyZWdyZXNzaW9uX2FsbF9wcmVkaWN0aW9uc190aHJlc2hvbGQgPC0gbGlzdCgpDQoNCmZvcihpIGluIDE6bGVuZ3RoKHZhbF9zZXRzKSkgew0KICANCiAgcmVncmVzc2lvbl9hbGwgPC0gZ2xtKGhhc19jYXJkIH4gLiwgZGF0YSA9IHRyYWluX3NldHNbW2ldXSwgZmFtaWx5ID0gYmlub21pYWwpDQogIA0KICByZWdyZXNzaW9uX2FsbF9wcmVkaWN0aW9uc1tbaV1dIDwtIHByZWRpY3QocmVncmVzc2lvbl9hbGwsIHZhbF9zZXRzW1tpXV0sIHR5cGUgPSAicmVzcG9uc2UiKQ0KICANCiAgdGhyZXNob2xkIDwtIDAuNQ0KICANCiAgcmVncmVzc2lvbl9hbGxfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpXV0gPC0gaWZlbHNlKHJlZ3Jlc3Npb25fYWxsX3ByZWRpY3Rpb25zW1tpXV0gPiB0aHJlc2hvbGQsIFRSVUUsIEZBTFNFKQ0KDQogIHJlZ3Jlc3Npb25fYWxsX21ldHJpY3NbW2ldXSA8LSBnZXRfbWV0cmljcyhyZWdyZXNzaW9uX2FsbF9wcmVkaWN0aW9uc190aHJlc2hvbGRbW2ldXSwgdmFsX3NldHNbW2ldXSRoYXNfY2FyZCwgIkxvZ2lzdGljIFJlZ3Jlc3Npb24gQWxsIikNCiAgDQp9DQoNCnJlZ3Jlc3Npb25fYWxsX21ldHJpY3MgPC0gZG8uY2FsbCgicmJpbmQiLCByZWdyZXNzaW9uX2FsbF9tZXRyaWNzKQ0KbWV0cmljc19hbGwgPC0gYmluZF9yb3dzKG1ldHJpY3NfYWxsLCByZWdyZXNzaW9uX2FsbF9tZXRyaWNzKQ0KDQpjb2xNZWFucyhyZWdyZXNzaW9uX2FsbF9tZXRyaWNzICU+JSBzZWxlY3QoLW1vZGVsKSkNCmBgYA0KDQpgYGB7cn0NCiNyZWdyZXNzaW9uX2FsbF9leHBsYWluZXIgPC0gZXhwbGFpbihyZWdyZXNzaW9uX2FsbCwgZGF0YSA9IHRyYWluKQ0KYGBgDQoNCmBgYHtyfQ0KcGxvdF9jb25mdXNpb25fbWF0cml4KHJlZ3Jlc3Npb25fYWxsX3ByZWRpY3Rpb25zX3RocmVzaG9sZFtbaWRfc2V0XV0sIHZhbF9zZXRzW1tpZF9zZXRdXSRoYXNfY2FyZCkNCmBgYA0KDQpgYGB7cn0NCm1ha2Vfcm9jX3Bsb3RfYW5kX2dldF9hdWMocmVncmVzc2lvbl9hbGxfcHJlZGljdGlvbnNbW2lkX3NldF1dLCB2YWxfc2V0c1tbaWRfc2V0XV0kaGFzX2NhcmQpDQpgYGANCg0KYGBge3J9DQojcGxvdF9mZWF0dXJlX2ltcG9ydGFuY2UocmVncmVzc2lvbl9hbGwpDQpgYGANCg0KIyMjIERlY2lzaW9uIFRyZWUNCg0KRsO8ciBkZW4gRGVjaXNvbiBUcmVlIHZlcndlbmRlbiB3aXIgZGFzIFBhY2thZ2UgInJwYXJ0Ii4NCg0KYGBge3J9DQpkZWNpc2lvbl90cmVlX21ldHJpY3MgPC0gbGlzdCgpDQpkZWNpc2lvbl90cmVlX3ByZWRpY3Rpb25zIDwtIGxpc3QoKQ0KZGVjaXNpb25fdHJlZV9wcmVkaWN0aW9uc190aHJlc2hvbGQgPC0gbGlzdCgpDQoNCmZvcihpIGluIDE6bGVuZ3RoKHZhbF9zZXRzKSkgew0KICANCiAgZGVjaXNpb25fdHJlZSA8LSBycGFydChoYXNfY2FyZCB+IC4sIGRhdGEgPSB0cmFpbl9zZXRzW1tpXV0sIG1ldGhvZCA9ICJjbGFzcyIpDQogIA0KICBkZWNpc2lvbl90cmVlX3ByZWRpY3Rpb25zW1tpXV0gPC0gcHJlZGljdChkZWNpc2lvbl90cmVlLCB2YWxfc2V0c1tbaV1dLCB0eXBlID0gInByb2IiKVssIDJdDQogIA0KICB0aHJlc2hvbGQgPC0gMC41DQogIA0KICBkZWNpc2lvbl90cmVlX3ByZWRpY3Rpb25zX3RocmVzaG9sZFtbaV1dIDwtIGlmZWxzZShkZWNpc2lvbl90cmVlX3ByZWRpY3Rpb25zW1tpXV0gPiB0aHJlc2hvbGQsIFRSVUUsIEZBTFNFKQ0KDQogIGRlY2lzaW9uX3RyZWVfbWV0cmljc1tbaV1dIDwtIGdldF9tZXRyaWNzKGRlY2lzaW9uX3RyZWVfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpXV0sIHZhbF9zZXRzW1tpXV0kaGFzX2NhcmQsICJEZWNpc2lvbiBUcmVlIikNCiAgDQp9DQoNCmRlY2lzaW9uX3RyZWVfbWV0cmljcyA8LSBkby5jYWxsKCJyYmluZCIsIGRlY2lzaW9uX3RyZWVfbWV0cmljcykNCm1ldHJpY3NfYWxsIDwtIGJpbmRfcm93cyhtZXRyaWNzX2FsbCwgZGVjaXNpb25fdHJlZV9tZXRyaWNzKQ0KDQpjb2xNZWFucyhkZWNpc2lvbl90cmVlX21ldHJpY3MgJT4lIHNlbGVjdCgtbW9kZWwpKQ0KYGBgDQoNCmBgYHtyfQ0KbWFrZV9yb2NfcGxvdF9hbmRfZ2V0X2F1YyhkZWNpc2lvbl90cmVlX3ByZWRpY3Rpb25zW1tpZF9zZXRdXSwgdmFsX3NldHNbW2lkX3NldF1dJGhhc19jYXJkKQ0KYGBgDQoNCkRlY2lzaW9uIFRyZWVzIHNpbmQgaW4gZGVyIExhZ2UsIG1pdCBlaW5lciBncm9zc2VuIEFuemFobCB2b24gTWVya21hbGVuIHVtenVnZWhlbi4NCkVzIGthbm4gYWJlciBhdWNoIHZvbiBWb3J0ZWlsIHNlaW4sIG5pY2h0IGFsbGUgTWVya21hbGUgenUgYmVudXR6ZW4sIHVtIMOcYmVyYW5wYXNzdW5nIHp1IHZlcm1laWRlbiB1bmQgZGFkdXJjaCBkaWUgUGVyZm9ybWFuY2UgZGVzIE1vZGVsbHMgenUgdmVyYmVzc2Vybi4NCkRpZXMga2FubiBhdWNoIGRpZSBJbnRlcnByZXRpZXJiYXJrZWl0IGRlcyBNb2RlbGxzIGVyaMO2aGVuIHVuZCBkaWUgS29zdGVuIGbDvHIgZGFzIFRyYWluaW5nIHVuZCBkaWUgQXVzd2VydHVuZyBkZXMgTW9kZWxscyByZWR1emllcmVuLg0KDQpEYWhlciB3b2xsZW4gd2lyIGFscyBuw6RjaHN0ZXMgdW50ZXJzdWNoZW4sIG9iIGRhcyBNb2RlbGwgYmVzc2VyIHdpcmQsIHdlbm4gbmljaHQgYWxsZSBGZWF0dXJlcyB2ZXJ3ZW5kZXQgd2VyZGVuLg0KDQpEYWbDvHIgYmVudXR6ZW4gd2lyIGRpZSBGdW5rdGlvbiBSRkUgdm9tIFBha2V0IGNhcmV0Lg0KUkZFIHN0ZWh0IGbDvHIgIlJlY3Vyc2l2ZSBGZWF0dXJlIEVsaW1pbmF0aW9uIiAocmVrdXJzaXZlIE1lcmttYWxzZW50ZmVybnVuZykgdW5kIGlzdCBlaW5lIFRlY2huaWssIGRpZSB2ZXJ3ZW5kZXQgd2lyZCwgdW0gZWluZSBUZWlsbWVuZ2UgZGVyIHJlbGV2YW50ZXN0ZW4gTWVya21hbGUgYXVzIGVpbmVtIGdlZ2ViZW5lbiBEYXRlbnNhdHogYXVzenV3w6RobGVuLg0KRGFzIEhhdXB0emllbCB2b24gUkZFIGlzdCBlcywgZGllIEFuemFobCBkZXIgTWVya21hbGUgaW0gRGF0ZW5zYXR6IHp1IHJlZHV6aWVyZW4sIHfDpGhyZW5kIGRpZSBGw6RoaWdrZWl0IGRlcyBNb2RlbGxzLCBwcsOkemlzZSB2b3JoZXJ6dXNhZ2VuLCBlcmhhbHRlbiBibGVpYnQgb2RlciBzb2dhciB2ZXJiZXNzZXJ0IHdpcmQuDQoNCkRlciBSRkUtQWxnb3JpdGhtdXMgZnVua3Rpb25pZXJ0LCBpbmRlbSBlciBNZXJrbWFsZSByZWt1cnNpdiBhdXMgZGVtIERhdGVuc2F0eiBlbnRmZXJudCB1bmQgYmVpIGplZGVtIFNjaHJpdHQgZWluIE1vZGVsbCBhdWYgZGVuIHZlcmJsZWliZW5kZW4gTWVya21hbGVuIHRyYWluaWVydC4NCkRhcyBNZXJrbWFsLCBkYXMgZGllIGdlcmluZ3N0ZSBCZWl0cmFnIHp1ciBNb2RlbGxsZWlzdHVuZyBoYXQsIHdpcmQgYmVpIGplZGVtIFNjaHJpdHQgZW50ZmVybnQuDQpEZXIgVm9yZ2FuZyB3aXJkIGRhbm4gd2llZGVyaG9sdCwgYmlzIGVpbmUgYmVzdGltbXRlIEFuemFobCB2b24gTWVya21hbGVuIGVycmVpY2h0IGlzdCBvZGVyIGJpcyBrZWluZSB3ZWl0ZXJlbiBWZXJiZXNzZXJ1bmdlbiBkZXIgTW9kZWxsbGVpc3R1bmcgZXJyZWljaHQgd2VyZGVuLg0KDQpEYSBkZXIgUkZFIGJlcmVpdHMgbWl0IENyb3NzLVZhbGlkYXRpb24gYXJiZWl0ZXQsIGJlbnV0emVuIHdpciBoaWVyIGRhcyBnZXNhbXRlIFRyYWluaW5nc3NldC4NCkRhbmFjaCBtYWNoZW4gd2lyIG5vY2htYWxzIHVuc2VyZSBlaWdlbmUgS3JldXp2YWxpZGllcnVuZyBtaXQgZGVtIGdlZnVuZGVuZW4gU3Vic2V0IGRlciBJbnB1dC1QYXJhbWV0ZXJuLg0KV2lyIG3DtmNodGVuIGRlbiBEYXRlbnNhdHogYXVmIDEwIEZlYXR1cmVzIHJlZHV6aWVyZW4uDQpEYWJlaSBlbnRmZXJuZW4gd2lyIGJlaSBqZWRlbSBEdXJjaGxhdWYgMTAgRmVhdHVyZXMuDQoNCmBgYHtyfQ0KaWYgKEZBTFNFKSB7DQpzZXQuc2VlZCgyNykNCg0KIyB0cmFuc2Zvcm0gaGFzX2NhcmQgdG8gZmFjdG9yIGFuZCByZW1vdmUgc3RhdHVzDQp0cmFpbiRoYXNfY2FyZCA8LSBhcy5mYWN0b3IodHJhaW4kaGFzX2NhcmQpDQp0cmFpbiRzdGF0dXMgPC0gTlVMTA0KDQoNCmNvbnRyb2wgPC0gcmZlQ29udHJvbChmdW5jdGlvbnMgPSBjYXJldEZ1bmNzLA0KICAgICAgICAgICAgICAgICAgICAgIG1ldGhvZCA9ICJyZXBlYXRlZGN2IiwNCiAgICAgICAgICAgICAgICAgICAgICByZXBlYXRzID0gNSkNCg0KIyBQZXJmb3JtIFJGRQ0KcmZlX2R0IDwtIHJmZSh4ID0gdHJhaW4gJT4lIHNlbGVjdCgtaGFzX2NhcmQpLCB5ID0gdHJhaW4kaGFzX2NhcmQsDQogICAgICAgICAgICAgc2l6ZXMgPSBjKHNlcShmcm9tID0gMjAwLCB0byA9IDEwLCBieSA9IC0xMCkpLA0KICAgICAgICAgICAgIHJmZUNvbnRyb2wgPSBjb250cm9sLA0KICAgICAgICAgICAgIG1ldGhvZCA9ICJycGFydCIpDQoNCiMgRXh0cmFjdCB0aGUgc2VsZWN0ZWQgZmVhdHVyZXMNCnNlbGVjdGVkX2ZlYXR1cmVzIDwtIHJmZV9kdCRvcHRWYXJpYWJsZXMNCn0NCmBgYA0KDQpVbSBkZW4gRGVjaXNpb24gVHJlZSBub2NoIHdlaXRlciB6dSB2ZXJiZXNzZXJuLCB3b2xsZW4gd2lyIGRpZSB2ZXJzY2hpZWRlbmVuIEh5cGVycGFyYW1ldGVyIG9wdGltaWVyZW4uDQpIeXBlcnBhcmFtZXRlcm9wdGltaWVydW5nIChhdWNoIFR1bmluZyBnZW5hbm50KSBpc3QgZGVyIFByb3plc3MsIGRpZSBiZXN0ZSBTZXQgdm9uIEh5cGVycGFyYW1ldGVybiBmw7xyIGVpbiBtYXNjaGluZWxsZXMgTGVybm1vZGVsbCB6dSBmaW5kZW4uDQpXaXIgcHJvYmllcmVuLCBmb2xnZW5kZW4gUGFyYW1ldGVyIHp1IG9wdGltaWVyZW46DQoNCmNwIDogZGVyIENvbXBsZXhpdHktUGFyYW1ldGVyLCBkZXIgZGllIEtvbXBsaXppZXJ0aGVpdCBkZXMgQmF1bXMgcmVndWxpZXJ0LCBpbmRlbSBlciBkaWUgR3LDtsOfZSBkZXMgQmF1bXMgYmVzY2hyw6Rua3QuDQpKZSBrbGVpbmVyIGNwIGRlc3RvIGdyw7bDn2VyIGRlciBCYXVtDQoNCkRhIGRpZSBNZXRyaWsgUHJlY2lzaW9uIGluIGRlciBNZXRob2RlIG5pY2h0IHZvcmhhbmRlbiBpc3QsIHByb2JpZXJlbiB3aXIsIGF1ZiBBY2N1cmFjeSB6dSBvcHRpbWllcmVuLg0KDQpgYGB7cn0NCnBhcmFtX2dyaWQgPC0gZXhwYW5kLmdyaWQoY3AgPSBjKDAuMDAxLCAwLjAxLCAwLjEpKQ0KDQp0cmFpbiRoYXNfY2FyZCA8LSBhcy5mYWN0b3IodHJhaW4kaGFzX2NhcmQpDQoNCmRlY2lzaW9uX3RyZWVfdHVuZWQgPC0gdHJhaW4oaGFzX2NhcmQgfiAuLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgZGF0YSA9IHRyYWluLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgbWV0aG9kID0gInJwYXJ0IiwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICAgIG1ldHJpYyA9ICJBY2N1cmFjeSIsDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgICB0dW5lR3JpZCA9IHBhcmFtX2dyaWQsDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgICB0ckNvbnRyb2wgPSB0cmFpbkNvbnRyb2wobWV0aG9kID0gImN2IiwgbnVtYmVyID0gMTApKQ0KYGBgDQoNCmBgYHtyfQ0KcHJpbnQoZGVjaXNpb25fdHJlZV90dW5lZCkNCmBgYA0KDQpgYGB7cn0NCmRlY2lzaW9uX3RyZWVfdHVuZWRfbWV0cmljcyA8LSBsaXN0KCkNCmRlY2lzaW9uX3RyZWVfdHVuZWRfcHJlZGljdGlvbnMgPC0gbGlzdCgpDQpkZWNpc2lvbl90cmVlX3R1bmVkX3ByZWRpY3Rpb25zX3RocmVzaG9sZCA8LSBsaXN0KCkNCg0KZm9yKGkgaW4gMTpsZW5ndGgodmFsX3NldHMpKSB7DQogIA0KICBkZWNpc2lvbl90cmVlX3R1bmVkX3ByZWRpY3Rpb25zW1tpXV0gPC0gcHJlZGljdChkZWNpc2lvbl90cmVlX3R1bmVkLCB2YWxfc2V0c1tbaV1dLCB0eXBlID0gInByb2IiKVssIDJdDQogIA0KICB0aHJlc2hvbGQgPC0gMC41DQogIA0KICBkZWNpc2lvbl90cmVlX3R1bmVkX3ByZWRpY3Rpb25zX3RocmVzaG9sZFtbaV1dIDwtIGlmZWxzZShkZWNpc2lvbl90cmVlX3R1bmVkX3ByZWRpY3Rpb25zW1tpXV0gPiB0aHJlc2hvbGQsIFRSVUUsIEZBTFNFKQ0KDQogIGRlY2lzaW9uX3RyZWVfdHVuZWRfbWV0cmljc1tbaV1dIDwtIGdldF9tZXRyaWNzKGRlY2lzaW9uX3RyZWVfdHVuZWRfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpXV0sIHZhbF9zZXRzW1tpXV0kaGFzX2NhcmQsICJEZWNpc2lvbiBUcmVlIChUdW5lZCkiKQ0KICANCn0NCg0KZGVjaXNpb25fdHJlZV90dW5lZF9tZXRyaWNzIDwtIGRvLmNhbGwoInJiaW5kIiwgZGVjaXNpb25fdHJlZV90dW5lZF9tZXRyaWNzKQ0KbWV0cmljc19hbGwgPC0gYmluZF9yb3dzKG1ldHJpY3NfYWxsLCBkZWNpc2lvbl90cmVlX3R1bmVkX21ldHJpY3MpDQoNCmNvbE1lYW5zKGRlY2lzaW9uX3RyZWVfdHVuZWRfbWV0cmljcyAlPiUgc2VsZWN0KC1tb2RlbCkpDQpgYGANCg0KYGBge3J9DQptYWtlX3JvY19wbG90X2FuZF9nZXRfYXVjKGRlY2lzaW9uX3RyZWVfdHVuZWRfcHJlZGljdGlvbnNbW2lkX3NldF1dLCB2YWxfc2V0c1tbaWRfc2V0XV0kaGFzX2NhcmQpDQpgYGANCg0KRGllIEtsYXNzaWZpa2F0aW9uIGlzdCB1bSBlaW5pZ2VzIGJlc3NlciBhdWYgZGVtIERlY2lzaW9uIFRyZWUuDQpFcyBzY2hlaW50IGFsc28gZsO8ciB1bnNlcmVuIFZlcndlbmR1bmdzendlY2sgZGVyIGJlc3NlcmUgQWxnb3JpdGhtdXMgenUgc2Vpbi4NCldpciB1bnRlcnN1Y2hlbiBub2NoIEVyd2VpdGVydW5nZW4gZGVzIERlY2lzaW9uIFRyZWVzOiBkZW4gUmFuZG9tIEZvcmVzdCB1bmQgWEdCb29zdA0KDQojIyMgUmFuZG9tIEZvcmVzdA0KDQpGw7xyIGRlbiBSYW5kb20gRm9yZXN0IGJyYXVjaGVuIHdpciBkYXMgUGFja2FnZSAicmFuZG9tRm9yZXN0Ii4NCkVzIHZlcndlbmRldCBCcmVpbWFuJ3MgcmFuZG9tIGZvcmVzdCBhbGdvcml0aG11cyB1bmQga2FubiBmw7xyIEtsYXNzaWZpa2F0aW9uIHVuZCBSZWdyZXNzaW9uIHZlcndlbmRldCB3ZXJkZW4uDQoNCkJlaW0gUmFuZG9tIEZvcmVzdCBtdXNzIHVuc2VyZSBaaWVsdmFyaWFiZWwgbm9jaCBpbiBlaW5lbiBGYWt0b3IgdW1nZXdhbmRlbHQgd2VyZGVuLCBkYW1pdCBlaW4gV2VydCB6d2lzY2hlbiAwIHVuZCAxIHZvcmhlcmdlc2FndCB3ZXJkZW4ga2Fubi4NCg0KYGBge3J9DQpyYW5kb21fZm9yZXN0X21ldHJpY3MgPC0gbGlzdCgpDQpyYW5kb21fZm9yZXN0X3ByZWRpY3Rpb25zIDwtIGxpc3QoKQ0KcmFuZG9tX2ZvcmVzdF9wcmVkaWN0aW9uc190aHJlc2hvbGQgPC0gbGlzdCgpDQoNCmZvcihpIGluIDE6bGVuZ3RoKHZhbF9zZXRzKSkgew0KICANCiAgdHJhaW5fc2V0c1tbaV1dJGhhc19jYXJkIDwtIGFzLmZhY3Rvcih0cmFpbl9zZXRzW1tpXV0kaGFzX2NhcmQpDQogIA0KICByYW5kb21fZm9yZXN0IDwtIHJhbmRvbUZvcmVzdChoYXNfY2FyZCB+IC4sIGRhdGEgPSB0cmFpbl9zZXRzW1tpXV0sIG1ldGhvZCA9ICJjbGFzcyIpDQogIA0KICByYW5kb21fZm9yZXN0X3ByZWRpY3Rpb25zW1tpXV0gPC0gcHJlZGljdChyYW5kb21fZm9yZXN0LCB2YWxfc2V0c1tbaV1dLCB0eXBlID0gInByb2IiKVssIDJdDQogIA0KICB0aHJlc2hvbGQgPC0gMC41DQogIA0KICByYW5kb21fZm9yZXN0X3ByZWRpY3Rpb25zX3RocmVzaG9sZFtbaV1dIDwtIGlmZWxzZShyYW5kb21fZm9yZXN0X3ByZWRpY3Rpb25zW1tpXV0gPiB0aHJlc2hvbGQsIFRSVUUsIEZBTFNFKQ0KDQogIHJhbmRvbV9mb3Jlc3RfbWV0cmljc1tbaV1dIDwtIGdldF9tZXRyaWNzKHJhbmRvbV9mb3Jlc3RfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpXV0sIHZhbF9zZXRzW1tpXV0kaGFzX2NhcmQsICJSYW5kb20gRm9yZXN0IikNCiAgDQp9DQoNCnJhbmRvbV9mb3Jlc3RfbWV0cmljcyA8LSBkby5jYWxsKCJyYmluZCIsIHJhbmRvbV9mb3Jlc3RfbWV0cmljcykNCm1ldHJpY3NfYWxsIDwtIGJpbmRfcm93cyhtZXRyaWNzX2FsbCwgcmFuZG9tX2ZvcmVzdF9tZXRyaWNzKQ0KDQpjb2xNZWFucyhyYW5kb21fZm9yZXN0X21ldHJpY3MgJT4lIHNlbGVjdCgtbW9kZWwpKQ0KYGBgDQoNCkRlciBSYW5kb20gRm9yZXN0IGlzdCBlaW4gd2VuaWcgYmVzc2VyIGFscyBkZXIgRGVjaXNpb24gVHJlZS4NCkFscyBuw6RjaHN0ZXMgd29sbGVuIHdpciBwcm9iaWVyZW4sIG9iIGVpbmUgSHlwZXJwYXJhbWV0ZXJvcHRpbWllcnVuZyB1bnNlciBSZXN1bHRhdCBub2NoIHZlcmJlc3Nlcm4ga2Fubi4NCkJlaSBkZXIgSHlwZXJwYXJhbWV0ZXJvcHRpbWllcnVuZyBnZWhlbiB3aXIgd2llZGVyIGdsZWljaCB2b3IsIHdpZSBiZWltIERlY2lzaW9uIFRyZWUuDQpXaXIgcHJvYmllcmVuLCBmb2xnZW5kZSBQYXJhbWV0ZXIgenUgb3B0aW1pZXJlbjoNCg0KbXRyeSA6IGRpZSBBbnphaGwgZGVyIFZhcmlhYmxlbiwgZGllIHp1ZsOkbGxpZyBhbHMgS2FuZGlkYXRlbiBhbiBlaW5lciBUcmVubnVuZyBhdXNnZXfDpGhsdCB3ZXJkZW4uDQpzcGxpdHJ1bGUgOiBkaWUgVHJlbm5yZWdlbCwgZGllIHZlcndlbmRldCB3aXJkLCB1bSBkaWUgUXVhbGl0w6R0IGVpbmVyIFRyZW5udW5nIHp1IGJld2VydGVuLg0KImdpbmkiIFVucmVpbmhlaXQgdW5kICJleHRyYXRyZWVzIiBzaW5kIHp3ZWkgaMOkdWZpZyB2ZXJ3ZW5kZXRlIFRyZW5ucmVnZWxuLg0KbWluLm5vZGUuc2l6ZSA6IGRpZSBtaW5pbWFsZSBBbnphaGwgdm9uIEJlb2JhY2h0dW5nZW4gaW4gZWluZW0gRW5ka25vdGVuLg0KbWF4LmRlcHRoIDogZGllIG1heGltYWxlIFRpZWZlIGRlcyBCYXVtZXMuDQpFcyBpc3QgZWluZSBTZXF1ZW56IHZvbiBHYW56emFobGVuIHZvbiAxIGJpcyAzMCBtaXQgZWluZW0gU2Nocml0dCB2b24gNS4NCm50cmVlIDogZGllIEFuemFobCBkZXIgQsOkdW1lLCBkaWUgaW0gWnVmYWxsc3dhbGQgZ2V3YWNoc2VuIHNpbmQuDQoNCmBgYHtyfQ0KcGFyYW1fZ3JpZCA8LSBleHBhbmQuZ3JpZChtdHJ5ID0gYygwLjEsIDEsIDEwLCAxMDApKQ0KDQojIERlZmluZSB0aGUgbW9kZWwgdXNpbmcgdGhlIHRyYWluKCkgZnVuY3Rpb24NCg0KcmFuZG9tX2ZvcmVzdF90dW5lZCA8LSB0cmFpbihoYXNfY2FyZCB+IC4sDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgICBkYXRhID0gdHJhaW4sDQogICAgICAgICAgICAgICAgICAgICAgICAgICAgICBtZXRob2QgPSAicmYiLA0KICAgICAgICAgICAgICAgICAgICAgICAgICAgICAgbWV0cmljID0gIkFjY3VyYWN5IiwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICAgIHR1bmVHcmlkID0gcGFyYW1fZ3JpZCwNCiAgICAgICAgICAgICAgICAgICAgICAgICAgICAgIHRyQ29udHJvbCA9IHRyYWluQ29udHJvbChtZXRob2QgPSAiY3YiLCBudW1iZXIgPSAxMCkpDQoNCnByaW50KHJhbmRvbV9mb3Jlc3RfdHVuZWQkYmVzdFR1bmUpDQpgYGANCg0KQXVjaCBoaWVyIG5laG1lbiB3aXIgd2llZGVyIGRhcyBvcHRpbWllcnRlIE1vZGVsbCB1bmQgdW50ZXJzdWNoZW4gZXMgbWl0IHVuc2VyZXIgZWlnZW5lbiBLcmV1enZhbGlkaWVydW5nLg0KDQpgYGB7cn0NCnJhbmRvbV9mb3Jlc3RfdHVuZWRfbWV0cmljcyA8LSBsaXN0KCkNCnJhbmRvbV9mb3Jlc3RfdHVuZWRfcHJlZGljdGlvbnMgPC0gbGlzdCgpDQpyYW5kb21fZm9yZXN0X3R1bmVkX3ByZWRpY3Rpb25zX3RocmVzaG9sZCA8LSBsaXN0KCkNCg0KZm9yKGkgaW4gMTpsZW5ndGgodmFsX3NldHMpKSB7DQogIA0KICB0cmFpbl9zZXRzW1tpXV0kaGFzX2NhcmQgPC0gYXMuZmFjdG9yKHRyYWluX3NldHNbW2ldXSRoYXNfY2FyZCkNCiAgDQogIHJhbmRvbV9mb3Jlc3RfdHVuZWQgPC0gcmFuZG9tRm9yZXN0KGhhc19jYXJkIH4gLiwgZGF0YSA9IHRyYWluX3NldHNbW2ldXSwgbWV0aG9kID0gImNsYXNzIiwgbXRyeSA9IDEwMCkNCiAgDQogIHJhbmRvbV9mb3Jlc3RfdHVuZWRfcHJlZGljdGlvbnNbW2ldXSA8LSBwcmVkaWN0KHJhbmRvbV9mb3Jlc3RfdHVuZWQsIHZhbF9zZXRzW1tpXV0sIHR5cGUgPSAicHJvYiIpWywgMl0NCiAgDQogIHRocmVzaG9sZCA8LSAwLjUNCiAgDQogIHJhbmRvbV9mb3Jlc3RfdHVuZWRfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpXV0gPC0gaWZlbHNlKHJhbmRvbV9mb3Jlc3RfdHVuZWRfcHJlZGljdGlvbnNbW2ldXSA+IHRocmVzaG9sZCwgVFJVRSwgRkFMU0UpDQoNCiAgcmFuZG9tX2ZvcmVzdF90dW5lZF9tZXRyaWNzW1tpXV0gPC0gZ2V0X21ldHJpY3MocmFuZG9tX2ZvcmVzdF90dW5lZF9wcmVkaWN0aW9uc190aHJlc2hvbGRbW2ldXSwgdmFsX3NldHNbW2ldXSRoYXNfY2FyZCwgIlJhbmRvbSBGb3Jlc3QgKFR1bmVkKSIpDQogIA0KfQ0KDQoNCnJhbmRvbV9mb3Jlc3RfdHVuZWRfbWV0cmljcyA8LSBkby5jYWxsKCJyYmluZCIsIHJhbmRvbV9mb3Jlc3RfdHVuZWRfbWV0cmljcykNCm1ldHJpY3NfYWxsIDwtIGJpbmRfcm93cyhtZXRyaWNzX2FsbCwgcmFuZG9tX2ZvcmVzdF90dW5lZF9tZXRyaWNzKQ0KDQpjb2xNZWFucyhyYW5kb21fZm9yZXN0X3R1bmVkX21ldHJpY3MgJT4lIHNlbGVjdCgtbW9kZWwpKQ0KYGBgDQoNCmBgYHtyfQ0KbWFrZV9yb2NfcGxvdF9hbmRfZ2V0X2F1YyhyYW5kb21fZm9yZXN0X3R1bmVkX3ByZWRpY3Rpb25zW1tpZF9zZXRdXSwgdmFsX3NldHNbW2lkX3NldF1dJGhhc19jYXJkKQ0KYGBgDQoNCmBgYHtyfQ0KaWYgKEZBTFNFKSB7DQpzZXQuc2VlZCgyNykNCg0KIyB0cmFuc2Zvcm0gaGFzX2NhcmQgdG8gZmFjdG9yIGFuZCByZW1vdmUgc3RhdHVzDQp0cmFpbiRoYXNfY2FyZCA8LSBhcy5mYWN0b3IodHJhaW4kaGFzX2NhcmQpDQp0cmFpbiRzdGF0dXMgPC0gTlVMTA0KDQoNCmNvbnRyb2wgPC0gcmZlQ29udHJvbChmdW5jdGlvbnMgPSBjYXJldEZ1bmNzLA0KICAgICAgICAgICAgICAgICAgICAgIG1ldGhvZCA9ICJyZXBlYXRlZGN2IiwNCiAgICAgICAgICAgICAgICAgICAgICByZXBlYXRzID0gNSkNCg0KIyBQZXJmb3JtIFJGRQ0KcmZlX2R0IDwtIHJmZSh4ID0gdHJhaW4gJT4lIHNlbGVjdCgtaGFzX2NhcmQpLCB5ID0gdHJhaW4kaGFzX2NhcmQsDQogICAgICAgICAgICAgc2l6ZXMgPSBjKHNlcShmcm9tID0gMjAwLCB0byA9IDEwLCBieSA9IC0xMCkpLA0KICAgICAgICAgICAgIHJmZUNvbnRyb2wgPSBjb250cm9sLA0KICAgICAgICAgICAgIG1ldGhvZCA9ICJycGFydCIpDQoNCiMgRXh0cmFjdCB0aGUgc2VsZWN0ZWQgZmVhdHVyZXMNCnNlbGVjdGVkX2ZlYXR1cmVzIDwtIHJmZV9kdCRvcHRWYXJpYWJsZXMNCnNlbGVjdGVkX2ZlYXR1cmVzDQp9DQpgYGANCg0KIyMjIFhHQm9vc3QNCg0KRGFzIFhHQm9vc3QgTW9kZWxsIHdpcmQgbWl0IGRlciBMaWJyYXJ5ICJ4Z2Jvb3N0IiB0cmFpbmllcnQuDQpEYSBlcyBQcm9ibGVtZSBtaXQgbmljaHQtbnVtZXJpc2NoZW4gVmFyaWFiZWxuIGdhYiwgd3VyZGVuIGRpZXNlIGVudGZlcm50Lg0KDQpgYGB7cn0NCnhnX2Jvb3N0X21ldHJpY3MgPC0gbGlzdCgpDQp4Z19ib29zdF9wcmVkaWN0aW9ucyA8LSBsaXN0KCkNCnhnX2Jvb3N0X3ByZWRpY3Rpb25zX3RocmVzaG9sZCA8LSBsaXN0KCkNCg0KZm9yKGkgaW4gMTpsZW5ndGgodmFsX3NldHMpKSB7DQogIA0KICB0cmFpbl9kYXRhIDwtIHRyYWluX3NldHNbW2ldXSAlPiUgc2VsZWN0X2lmKGlzLm51bWVyaWMpDQogIHRlc3RfZGF0YSA8LSB2YWxfc2V0c1tbaV1dICU+JSBzZWxlY3RfaWYoaXMubnVtZXJpYykNCiAgDQogIHRyYWluX2RhdGEgPC0gY2JpbmQoYXMubnVtZXJpYyh0cmFpbl9zZXRzW1tpXV0kaGFzX2NhcmQpLCB0cmFpbl9kYXRhKQ0KICB0ZXN0X2RhdGEgPC0gY2JpbmQoYXMubnVtZXJpYyh2YWxfc2V0c1tbaV1dJGhhc19jYXJkKSwgdGVzdF9kYXRhKQ0KICANCiAgdHJhaW5fcHJlZHMgPC0gYXMubWF0cml4KHNhcHBseSh0cmFpbl9kYXRhWywtMV0sIGFzLm51bWVyaWMpKQ0KICB0cmFpbl9sYWJlbHMgPC0gdHJhaW5fZGF0YVssIDFdDQogIA0KICB0ZXN0X3ByZWRzIDwtIGFzLm1hdHJpeChzYXBwbHkodGVzdF9kYXRhWywtMV0sIGFzLm51bWVyaWMpKQ0KICB0ZXN0X2xhYmVscyA8LSB0ZXN0X2RhdGFbLCAxXQ0KICANCiAgcGFyYW0gPC0gbGlzdChtYXhfZGVwdGggPSAxMDAsIGV0YSA9IDAuMSwgbnRocmVhZCA9IDIpDQoNCiAgIyBUcmFpbiB0aGUgbW9kZWwNCiAgeGdfYm9vc3QgPC0geGdib29zdChkYXRhID0gdHJhaW5fcHJlZHMsIGxhYmVsID0gdHJhaW5fbGFiZWxzIC0gMSwgbnJvdW5kcyA9IDEwMCwgb2JqZWN0aXZlID0gImJpbmFyeTpsb2dpc3RpYyIsIHZlcmJvc2UgPSAwLCBtYXhpbWl6ZSA9ICJwcmVjaXNpb24iLCBwYXJhbXMgPSBwYXJhbSkNCg0KICAjIE1ha2UgcHJlZGljdGlvbnMgb24gdGhlIHRlc3QgZGF0YQ0KICB4Z19ib29zdF9wcmVkaWN0aW9uc1tbaV1dIDwtIHByZWRpY3QoeGdfYm9vc3QsIHRlc3RfcHJlZHMpIA0KICANCiAgdGhyZXNob2xkIDwtIDAuNQ0KICANCiAgeGdfYm9vc3RfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpXV0gPC0gaWZlbHNlKHhnX2Jvb3N0X3ByZWRpY3Rpb25zW1tpXV0gPiB0aHJlc2hvbGQsIFRSVUUsIEZBTFNFKQ0KICANCiAgeGdfYm9vc3RfbWV0cmljc1tbaV1dIDwtIGdldF9tZXRyaWNzKHhnX2Jvb3N0X3ByZWRpY3Rpb25zX3RocmVzaG9sZFtbaV1dLCB2YWxfc2V0c1tbaV1dJGhhc19jYXJkLCAiWEdCb29zdCIpDQogIA0KfQ0KDQoNCnhnX2Jvb3N0X21ldHJpY3MgPC0gZG8uY2FsbCgicmJpbmQiLCB4Z19ib29zdF9tZXRyaWNzKQ0KbWV0cmljc19hbGwgPC0gYmluZF9yb3dzKG1ldHJpY3NfYWxsLCB4Z19ib29zdF9tZXRyaWNzKQ0KDQpjb2xNZWFucyh4Z19ib29zdF9tZXRyaWNzICU+JSBzZWxlY3QoLW1vZGVsKSkNCmBgYA0KDQpNaXQgSHlwZXJwYXJhbWV0ZXJvcHRpbWllcnVuZzoNCg0KYGBge3J9DQppZiAoRkFMU0UpIHsNCnRyYWluX2RhdGEgPC0gdHJhaW5fc2V0c1tbaV1dDQogIHRlc3RfZGF0YSA8LSB2YWxfc2V0c1tbaV1dDQogIA0KICB0cmFpbl9kYXRhIDwtIHRyYWluX3NldHNbW2ldXSAlPiUgc2VsZWN0X2lmKGlzLm51bWVyaWMpDQogIHRlc3RfZGF0YSA8LSB2YWxfc2V0c1tbaV1dICU+JSBzZWxlY3RfaWYoaXMubnVtZXJpYykNCg0KICANCiAgdHJhaW5fZGF0YSA8LSBjYmluZChhcy5udW1lcmljKHRyYWluX3NldHNbW2ldXSRoYXNfY2FyZCksIHRyYWluX2RhdGEpDQogIHRlc3RfZGF0YSA8LSBjYmluZChhcy5udW1lcmljKHZhbF9zZXRzW1tpXV0kaGFzX2NhcmQpLCB0ZXN0X2RhdGEpDQogIA0KICB0cmFpbl9wcmVkcyA8LSBhcy5tYXRyaXgoc2FwcGx5KHRyYWluX2RhdGFbLC0xXSwgYXMubnVtZXJpYykpDQogIHRyYWluX2xhYmVscyA8LSB0cmFpbl9kYXRhWywgMV0NCiAgDQogIHRlc3RfcHJlZHMgPC0gYXMubWF0cml4KHNhcHBseSh0ZXN0X2RhdGFbLC0xXSwgYXMubnVtZXJpYykpDQogIHRlc3RfbGFiZWxzIDwtIHRlc3RfZGF0YVssIDFdDQogIA0KICBwYXJhbV9ncmlkIDwtIGV4cGFuZC5ncmlkKG5yb3VuZHMgPSBjKDEwMDAsIDIwMDAsIDUwMDApLA0KICAgICAgICAgICAgICAgICAgICAgICAgIGV0YSA9IGMoMC4xLCAwLjIsIDAuMyksDQogICAgICAgICAgICAgICAgICAgICAgICAgbWF4X2RlcHRoID0gYygzLCA1LCA3LCAxMCksDQogICAgICAgICAgICAgICAgICAgICAgICAgZ2FtbWEgPSBjKDAsIDAuMSwgMC4yLCAxKSwNCiAgICAgICAgICAgICAgICAgICAgICAgICBjb2xzYW1wbGVfYnl0cmVlID0gYygwLjUsIDAuOCksDQogICAgICAgICAgICAgICAgICAgICAgICAgbWluX2NoaWxkX3dlaWdodCA9IGMoMSwgMywgNSksDQogICAgICAgICAgICAgICAgICAgICAgICAgc3Vic2FtcGxlID0gYygwLjUsIDAuOCwgMSkpDQoNCiAgeGdfYm9vc3RfaHlwZXJwYXJhbWV0ZXIgPC0gdHJhaW4oeCA9IHRyYWluX3ByZWRzLCB5ID0gdHJhaW5fbGFiZWxzLCBtZXRob2QgPSAieGdiVHJlZSIsIHRyQ29udHJvbCA9IHRyYWluQ29udHJvbChtZXRob2QgPSAiY3YiLCBudW1iZXIgPSAxMCksIHR1bmVHcmlkID0gcGFyYW1fZ3JpZCwgbWV0cmljID0gIkFjY3VyYWN5IiwgdmVyYm9zZSA9IEZBTFNFLCB2ZXJib3NpdHkgPSAwKSANCg0KfQ0KDQpgYGANCg0KYGBge3J9DQptYWtlX3JvY19wbG90X2FuZF9nZXRfYXVjKHhnX2Jvb3N0X3ByZWRpY3Rpb25zW1tpZF9zZXRdXSwgdmFsX3NldHNbW2lkX3NldF1dJGhhc19jYXJkKQ0KYGBgDQoNCiMgRGFzICJiZXN0ZSIgTW9kZWxsDQoNClVtIG51biBoZXJhdXN6dWZpbmRlbiwgd2VsY2hlcyB1bnNlcmVyIE1vZGVsbGUgZGFzIGJlc3RlIGlzdCwgdmVyZ2xlaWNoZW4gd2lyIGRpZSBNb2RlbGxlIGF1ZiB2ZXJzY2hpZWRlbmUgQXJ0ZW4gdW5kIFdlaXNlbi4NCkRhYmVpIGJldHJhY2h0ZW4gd2lyIHBybyBNb2RlbGxhbGdvcml0aG11cyBudXIgZGFzIGpld2VpbHMgYmVzdGUgYmV6w7xnbGljaCBkZXIgUHJlY2lzaW9uLg0KQWxzbyB2ZXJnbGVpY2hlbiB3aXIgdmllciBNb2RlbGxlOiBlaW5lIGxvZ2lzdGlzY2hlIFJlZ3Jlc3Npb24sIGVpbiBEZWNpc2lvbiBUcmVlLCBlaW4gUmFuZG9tIEZvcmVzdCB1bmQgZWluIFhHQm9vc3QuDQoNCldpciBzY2hhdWVuIGRpZSBkdXJjaHNjaG5pdHRsaWNoZW4gU2NvcmVzLCBkaWUgVmVydGVpbHVuZyBkZXIgUHJlY2lzaW9ucyBhbmhhbmQgZGVyIEtyZXV6dmFsaWRpZXJ1bmcsIFRvcC1OLUxpc3RlbiwgS29uZnVzaW9uc21hdHJpemVuLCBST0MtS3VydmVuIHVuZCBkaWUgRmVhdHVyZSBJbXBvcnRhbmNlIGFsbGVyIE1vZGVsbGUgYW4gdW5kIHZlcnN1Y2hlbiBzbywgZGFzIGJlc3RlIE1vZGVsbCB6dSBldmFsdWllcmVuLg0KDQpgYGB7cn0NCmNob3Nlbl9tb2RlbHMgPC0gYygiTG9naXN0aWMgUmVncmVzc2lvbiBBbGwiLCAiRGVjaXNpb24gVHJlZSIsICJSYW5kb20gRm9yZXN0IiwgIlhHQm9vc3QiKQ0KbWV0cmljc19hbGwgPC0gbWV0cmljc19hbGwgJT4lIGZpbHRlcihtb2RlbCAlaW4lIGNob3Nlbl9tb2RlbHMpDQpgYGANCg0KIyMgw5xiZXJzaWNodCBkZXIgZHVyY2hzY2huaXR0bGljaGVuIFNjb3Jlcw0KDQpgYGB7cn0NCm1ldHJpY3NfYWxsICU+JSBncm91cF9ieShtb2RlbCkgJT4lIHN1bW1hcml6ZV9pZihpcy5udW1lcmljLCBtZWFuKSAlPiUgYXJyYW5nZShkZXNjKHByZWNpc2lvbikpDQpgYGANCg0KSW4gZGllc2VyIERhcnN0ZWxsdW5nIHNpbmQgZGllIGR1cmNoc2Nobml0dGxpY2hlbiBTY29yZXMgw7xiZXIgZGllIENyb3NzIFZhbGlkYXRpb24gcHJvIE1vZGVsbCBhdWZnZXplaWd0Lg0KRGFzIGJlc3RlIE1vZGVsbCBiZXrDvGdsaWNoIFRyYWluIENWLVNjb3JlIGlzdCBkZXIgUmFuZG9tIEZvcmVzdC4gRXIgaXN0IGplZG9jaCBiZWkgYWxsZW4gS2VubnphaGxlbiBmYXN0IGRlY2t1bmdzZ2xlaWNoIHdpZSBkZXIgWEdCb29zdC4gDQpEaWVzIG1hY2h0IFNpbm4sIGRhIFhHQm9vc3QgZWluZSBFcndlaXRlcnVuZyBkZXMgUmFuZG9tIEZvcmVzdHMgaXN0LiANCg0KIyMgVmVydGVpbHVuZ2VuIGRlciBQcmVjaXNpb24NCg0KYGBge3J9DQpnZ3Bsb3QoZGF0YSA9IG1ldHJpY3NfYWxsLCBhZXMoeCA9IG1vZGVsLCB5ID0gcHJlY2lzaW9uKSkgKw0KICBnZW9tX2JveHBsb3QoKSArDQogIGxhYnModGl0bGUgPSAiVmVydGVpbHVuZyBkZXIgUHJlY2lzaW9uIHBybyBNb2RlbGwiLCB4ID0gIk1vZGVsbCIsIHkgPSAiUHJlY2lzaW9uIikNCmBgYA0KDQpJbiBkaWVzZXIgRGFyc3RlbGx1bmcgd2VyZGVuIGRpZSBWZXJ0ZWlsdW5nZW4gZGVyIENWLVNjb3JlcyBwcm8gTW9kZWxsIGF1ZmdlemVpZ3QuDQpFaW4gZ3V0IG9wdGltaWVydGVzIE1vZGVsbCBzb2xsdGUgYXVmIGRlbiBDcm9zcy1WYWxpZGF0aW9uIFNldHMgbcO2Z2xpY2hzdCDDpGhubGljaGUgU2NvcmVzIGF1ZndlaXNlbi4NCkRhbWl0IGthbm4gYXVmZ2V6ZWlndCB3ZXJkZW4sIGRhc3MgZGFzIE1vZGVsbCBhdWYgZGllIHZlcnNjaGllZGVuZW4gVGVzdGRhdGVuIG5pY2h0IG92ZXJmaXR0ZXQuDQpXaWUgd2lyIGhpZXIgc2VoZW4gc2luZCBkaWUgVmFyaWF0aW9uZW4gZGVyIFByZWNpc2lvbiBlaGVyIGtsZWluLiBEaWUgw6RobmxpY2hzdGVuIFByZWNpc2lvbiBSZXN1bHRhdGUgaGF0IGRlciBEZWNpc2lvbiBUcmVlLg0KDQoNCiMjIFZlcmdsZWljaCBkZXIgVG9wLU4tTGlzdGVuDQoNCkhpZXIgdmVyZ2xlaWNoZW4gd2lyIGRpZSBUb3AtTi1MaXN0ZW4gZGVyIE1vZGVsbGUuDQpGw7xyIGplZGVzIE1vZGVsbCB3aXJkIGVpbmUgVG9wLTIwIExpc3RlIGRlciBLdW5kZW4gdm9tIGVyc3RlbiB1bmQgbGV0enRlbiBWYWxpZGllcnVuZ3NzZXQgZGVyIEtyZXV6dmFsaWRpZXJ1bmcgbWl0IGRlbiBow7ZjaHN0ZW4gV2VydGVuIGJlaSBkZXIgUHJlZGljdGlvbiBnZW1hY2h0Lg0KQWxsIGRpZXNlIEt1bmRlbiBtw7xzc3RlbiBkZW1uYWNoIEvDpHVmZXIgc2Vpbi4NCkluIGRlbiBiZWlkZW4gVGFiZWxsZW4gc3RlbGxlbiB3aXIgZGFyLCBvYiBkaWUgTW9kZWxsZSBhdWYgZGVuIGpld2VpbGlnZW4gUG9zaXRpb25lbiByZWNodCBiZWhhbHRlbiBoYWJlbiBvZGVyIG5pY2h0Lg0KDQpgYGB7cn0NCg0KZGYgPC0gZGF0YS5mcmFtZSgpDQoNCmZvcihpIGluIDE6MTApDQp7DQogIHVzZXJzIDwtIHZhbF9zZXRzW1tpXV0NCg0KICB1c2VycyRwcmVkaWN0aW9uIDwtIGRlY2lzaW9uX3RyZWVfcHJlZGljdGlvbnNbW2ldXQ0KICBEZWNpc2lvbl9UcmVlIDwtIGhlYWQodXNlcnMgJT4lIGFycmFuZ2UoZGVzYyhwcmVkaWN0aW9uKSksIDIwKSRoYXNfY2FyZA0KDQogIHVzZXJzJHByZWRpY3Rpb24gPC0geGdfYm9vc3RfcHJlZGljdGlvbnNbW2ldXQ0KICBYR0Jvb3N0IDwtIGhlYWQodXNlcnMgJT4lIGFycmFuZ2UoZGVzYyhwcmVkaWN0aW9uKSksIDIwKSRoYXNfY2FyZA0KDQoNCiAgdXNlcnMkcHJlZGljdGlvbiA8LSByZWdyZXNzaW9uX2FsbF9wcmVkaWN0aW9uc1tbaV1dDQogIFJlZ3Jlc3Npb24gPC0gaGVhZCh1c2VycyAlPiUgYXJyYW5nZShkZXNjKHByZWRpY3Rpb24pKSwgMjApJGhhc19jYXJkDQoNCg0KICB1c2VycyRwcmVkaWN0aW9uIDwtIHJhbmRvbV9mb3Jlc3RfcHJlZGljdGlvbnNbW2ldXQ0KICBSYW5kb21Gb3Jlc3QgPC0gaGVhZCh1c2VycyAlPiUgYXJyYW5nZShkZXNjKHByZWRpY3Rpb24pKSwgMjApJGhhc19jYXJkDQoNCiAgZGZfbmV3IDwtIGRhdGEuZnJhbWUoUmVncmVzc2lvbiwgRGVjaXNpb25fVHJlZSwgUmFuZG9tRm9yZXN0LCBYR0Jvb3N0KQ0KICBkZl9uZXdbXSA8LSBsYXBwbHkoZGZfbmV3LCBhcy5udW1lcmljKQ0KICAjIGdldCAxIGZvciBpbmFjY3VyYXRlDQogIGRmX25ld1tdID0gMSAtIGRmX25ld1tdDQogIGlmKGRpbShkZilbMV0gPT0gMCkNCiAgew0KICAgIGRmIDwtIGRmX25ldyAgDQogIH0NCiAgZWxzZQ0KICB7DQogICAgZGYgPC0gYXMuZGF0YS5mcmFtZShhcy5tYXRyaXgoZGYpICsgYXMubWF0cml4KGRmX25ldykpDQogIH0NCiAgI3ByaW50KGkpDQp9DQoNCmRmDQpgYGANCg0KSW4gZGllc2VyIERhcnN0ZWxsdW5nZW4gc2luZCBkaWUgQW56YWhsIEZlaGxrbGFzc2lmaWthdGlvbmVuIGF1ZiBhbGxlIDEwIENyb3NzIFZhbGlkYXRpb24gRGF0ZW5zw6R0emUgYXVmc3VtbWllcnQuIERhcyBwZXJmZWt0ZSBNb2RlbGwgaMOkdHRlIGF1ZiBhbGxlbiBXZXJ0ZW4gZWluZSAwLCBhbHNvIGF1ZiBhbGxlbiBUb3AtTiBWb3JoZXJzYWdlbiBrZWluZSBGZWhsZXIgZ2VtYWNodC4NCg0KQmV0cmFjaHRlbiB3aXIgbnVyIGRpZSBGYWxzY2hrbGFzc2lmaWthdGlvbmVuIGRlciBUb3AtMyBWb3JoZXJzYWdlbiwgc2VoZW4gd2lyLCBkYXNzICJSYW5kb20gRm9yZXN0IiB1bmQgIlhHQm9vc3QiIGFtIGJlc3RlbiBhYnNjaG5laWRlbi4gRGVyICJEZWNpc2lvbiBUcmVlIiB1bmQgZGllICJsb2dpc3Rpc2NoZSBSZWdyZXNzaW9uIiBoYWJlbiBhdWYgZGllIFRvcC0zIFZvcmhlcnNhZ2VuIGRyZWkgb2RlciBtZWhyIGZhbHNjaGUgVm9yaGVyc2FnZW4gZ2VtYWNodCwgZGllIEZvcmVzdCBNb2RlbGxlIG51ciBudWxsIGJpcyBlaW5lbi4gWEdCb29zdCBzY2huZWlkZXQgaGllciBhbSBiZXN0ZW4gYWIuDQoNCg0KIyMgS29uZnVzaW9uc21hdHJpemVuDQoNCkF1Y2ggZGllIEtvbmZ1c2lvbnNtYXRyaXplbiB3ZXJkZW4gd2llZGVyIGbDvHIgZGllIHZlcnNjaGllZGVuZW4gTW9kZWxsZSBkYXJnZXN0bGx0Lg0KDQpgYGB7cn0NCmlkX3NldCA8LSA3DQoNCnBsb3RfY29uZnVzaW9uX21hdHJpeChyZWdyZXNzaW9uX2FsbF9wcmVkaWN0aW9uc190aHJlc2hvbGRbW2lkX3NldF1dLCB2YWxfc2V0c1tbaWRfc2V0XV0kaGFzX2NhcmQsICJSZWdyZXNzaW9uIikNCnBsb3RfY29uZnVzaW9uX21hdHJpeChkZWNpc2lvbl90cmVlX3ByZWRpY3Rpb25zX3RocmVzaG9sZFtbaWRfc2V0XV0sIHZhbF9zZXRzW1tpZF9zZXRdXSRoYXNfY2FyZCwgIkRlY2lzaW9uIFRyZWUiKQ0KcGxvdF9jb25mdXNpb25fbWF0cml4KHJhbmRvbV9mb3Jlc3RfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpZF9zZXRdXSwgdmFsX3NldHNbW2lkX3NldF1dJGhhc19jYXJkLCAiUmFuZG9tIEZvcmVzdCIpDQpwbG90X2NvbmZ1c2lvbl9tYXRyaXgoeGdfYm9vc3RfcHJlZGljdGlvbnNfdGhyZXNob2xkW1tpZF9zZXRdXSwgdmFsX3NldHNbW2lkX3NldF1dJGhhc19jYXJkLCAiWEdCb29zdCIpDQpgYGANCg0KRGllIENvbmZ1c2lvbiBNYXRyaXR6ZW4gZGVyIE1vZGVsbGUgc2VoZW4gc2ljaCBzZWhyIGdydW5kc8OkdHpsaWNoIMOkaG5saWNoLiANCkVpbnppZyBiZWkgZGVyIGxvZ2lzdGlzY2hlbiBSZWdyZXNzaW9uIHNpbmQgZGllIGZhbHNlLXBvc2l0aXZlIFdlcnRlIGjDtmhlciBhbHMgYmVpIGRlbiDDvGJyaWdlbiBNb2RlbGxlbi4NCg0KDQojIyBST0MgS3VydmVuDQoNCmBgYHtyfQ0KZ2V0X21lYW4gPC0gZnVuY3Rpb24oY3ZfcmVzdWx0cykNCnsNCiAgcmVzIDwtIGFzLm1hdHJpeChjdl9yZXN1bHRzW1sxXV0pDQogIGZvcihpIGluIDI6bGVuZ3RoKGN2X3Jlc3VsdHMpKQ0KICB7DQogICAgcmVzID0gcmVzICsgYXMubWF0cml4KGN2X3Jlc3VsdHNbW2ldXSkNCiAgfQ0KICByZXR1cm4oYXMubnVtZXJpYyhyZXMgLyBsZW5ndGgoY3ZfcmVzdWx0cykpKQ0KfQ0KDQptYWtlX3JvY19wbG90X2FuZF9nZXRfYXVjX2xpc3QgPC0gZnVuY3Rpb24ocHJlZGljdGlvbnMsIHRydWVfdmFsdWVzKQ0Kew0KICBjb2xvcnMgPC0gYygiYmx1ZSIsICJyZWQiLCAiYmxhY2siLCAiZ3JlZW4iKQ0KICBhdWNfc2NvcmVzIDwtIGMoKQ0KICBmb3IoaSBpbiAxOmxlbmd0aChwcmVkaWN0aW9ucykpDQogIHsNCiAgICByb2NfY3VydmUgPC0gcm9jKChhcy5udW1lcmljKHRydWVfdmFsdWVzKSAtIDEpLCBhcy5udW1lcmljKHByZWRpY3Rpb25zW1tpXV0pKQ0KICAgIGF1Y19zY29yZSA8LSBhdWMocm9jX2N1cnZlKQ0KICAgIGF1Y19zY29yZXMgPSBhcHBlbmQoYXVjX3Njb3JlcywgYXVjX3Njb3JlKQ0KICAgIGlmKGkgPT0gMSkNCiAgICB7DQogICAgICBwbG90KHJvY19jdXJ2ZSwgeGxhYiA9ICJGYWxzZSBQb3NpdGl2ZSBSYXRlIiwgeWxhYiA9ICJUcnVlIFBvc2l0aXZlIFJhdGUiLCBtYWluID0iUk9DIEN1cnZlIiwgY29sPWNvbG9yc1tpXSkNCiAgICB9DQogICAgZWxzZQ0KICAgIHsNCiAgICAgIGxpbmVzKHJvY19jdXJ2ZSwgeGxhYiA9ICJGYWxzZSBQb3NpdGl2ZSBSYXRlIiwgeWxhYiA9ICJUcnVlIFBvc2l0aXZlIFJhdGUiLCBtYWluID0iUk9DIEN1cnZlIiwgY29sPWNvbG9yc1tpXSkNCiAgICB9DQogIH0NCiAgbGVnZW5kKCJib3R0b21yaWdodCIsIGxlZ2VuZD1jKA0KICAgIHBhc3RlKCJMb2dpc3RpYyBSZWdyZXNzaW9uIEFVQzoiLCByb3VuZChhdWNfc2NvcmVzWzFdLCAzKSksIA0KICAgIHBhc3RlKCJEZWNpc2lvbiBUcmVlIEFVQzoiLCByb3VuZChhdWNfc2NvcmVzWzJdLCAzKSksIA0KICAgIHBhc3RlKCJSYW5kb20gRm9yZXN0IEFVQzoiLCByb3VuZChhdWNfc2NvcmVzWzNdLCAzKSksIA0KICAgIHBhc3RlKCJYR0Jvb3N0IEFVQzoiLCByb3VuZChhdWNfc2NvcmVzWzRdLCAzKSkpLCBjb2w9Y29sb3JzLCBwY2g9NCkNCn0NCg0KbWFrZV9yb2NfcGxvdF9hbmRfZ2V0X2F1Y19saXN0KGxpc3QocmVncmVzc2lvbl9iYXNlbGluZV9wcmVkaWN0aW9uc1tbaWRfc2V0XV0sIGRlY2lzaW9uX3RyZWVfdHVuZWRfcHJlZGljdGlvbnNbW2lkX3NldF1dLCByYW5kb21fZm9yZXN0X3R1bmVkX3ByZWRpY3Rpb25zW1tpZF9zZXRdXSwgeGdfYm9vc3RfcHJlZGljdGlvbnNbW2lkX3NldF1dKSwgdmFsX3NldHNbW2lkX3NldF1dJGhhc19jYXJkKQ0KDQoNCmBgYA0KDQpJbiBkaWVzZXIgR3JhZmlrIHd1cmRlbiBkaWUgUk9DIEt1cnZlbiBkZXIgdmVyc2NoaWVkZW5lbiBNb2RlbGxlIMO8YmVyZWluYW5kZXIgZ2VwbG90dGV0Lg0KVW0gZGllcyBhdWYgZGVuIFRyYWluaW5nc2RhdGVuIHR1biB6dSBrw7ZubmVuLCB3dXJkZSBlaW4genVmw6RsbGlnZXMgVHJhaW4vVmFsIFBhY2tldCBnZXfDpGhsdC4NCg0KRGllIFJPQyBLdXJ2ZSBzb2xsdGUgc2ljaCBtw7ZnbGljaHN0IHdlaXQgdm9uIGRlciBncmF1ZW4gTGluaWUgZW50ZmVybmVuLCBkaWVzIHR1dCBzaWUgYXVjaCBiZWkgYWxsZW4gTW9kZWxsZW4gcmVjaHQgZ3V0Lg0KRXMgaXN0IHNjaHdpZXJpZyB2aXN1ZWxsIHp1IGVya2VubmVuLCBvYiBudW4gWEdCb29zdCBvZGVyIFJhbmRvbSBGb3Jlc3Qgc2ljaCB3ZWl0ZXIgbmFjaCBvYmVuIGxpbmtzIGVudGZlcm50Lg0KRHVyY2ggZGVuIEFVQyB3aXJkIGRldXRsaWNoLCBkYXNzIGRlciBSYW5kb20gRm9yZXN0IGxlaWNodCBkaWUgTmFzZSB2b3JuIGhhdC4NCg0KDQojIyBGZWF0dXJlIEltcG9ydGFuY2UNCg0KYGBge3J9DQoNCm9ubHlfbnVtZXJpYyA8LSB0cmFpbiAlPiUgc2VsZWN0X2lmKGlzLm51bWVyaWMpDQp5IDwtIGZhY3Rvcih0cmFpbiRoYXNfY2FyZCwgb3JkZXJlZCA9IFRSVUUpDQoNCmV4cGxhaW5lcl9yZiA8LSBleHBsYWluKA0KICBtb2RlbCA9IHhnX2Jvb3N0LA0KICBkYXRhID0gdHJhaW4gJT4lIHNlbGVjdCgtaGFzX2NhcmQpLA0KICB5ID0gdHJhaW4kaGFzX2NhcmQNCiAgKQ0KDQpgYGANCg0KYGBge3J9DQppbXBvcnRhbmNlX21hdHJpeCA9IHhnYi5pbXBvcnRhbmNlKGNvbG5hbWVzKHRyYWluX3ByZWRzKSwgbW9kZWwgPSB4Z19ib29zdCkNCnhnYi5wbG90LmltcG9ydGFuY2UoaW1wb3J0YW5jZV9tYXRyaXhbMTo1LF0pDQoNCmBgYA0KDQojIFJlZHV6aWVyZW4gZGVzIGJlc3RlbiBNb2RlbGxlcw0KDQpMaWZ0IEt1cnZlPw0KDQojIEJlc3RlcyBNb2RlbGwgYXVmIGRlbiBUZXN0ZGF0ZW4NCg0KRGFzIGJlc3RlIE1vZGVsbCBiZXrDvGdsaWNoIGRlciBlcnJlY2huZXRlbiBTY29yZXMsIGRlcyBSVUMvQVVDIGlzdCBkZXIgUmFuZG9tIEZvcmVzdC4NCkluIGRlciBUb3AtTiBBbmFseXNlIHVuZCBkZXIgQ29uZnVzaW9uIE1hdHJpeCBpc3QgZXIgbWl0IGRlciBCZXN0ZSB1bmQgYW5uw6RoZXJuZCBzbyBwZXJmb3JtYW50IHdpZSBYR0Jvb3N0Lg0KSW4gRm9sZ2Ugd2lyZCBudW4gZGVyIFJhbmRvbSBGb3Jlc3QgYXVmIGFsbGVuIFRyYWluaW5nc2RhdGVuIHRyYWluaWVydCB1bmQgYXVmIGRlbiBUZXN0ZGF0ZW4gYW5hbHlzaWVydC4NCg0KYGBge3J9DQojcmVmaXQNCnRyYWluJGhhc19jYXJkIDwtIGFzLmZhY3Rvcih0cmFpbiRoYXNfY2FyZCkNCg0KcmFuZG9tX2ZvcmVzdF9yZWZpdCA8LSByYW5kb21Gb3Jlc3QoaGFzX2NhcmQgfiAuLCBkYXRhID0gdHJhaW4sIG1ldGhvZCA9ICJjbGFzcyIsIG10cnkgPSAxMDApDQoNCnJhbmRvbV9mb3Jlc3RfcmVmaXRfcHJlZGljdGlvbnMgPC0gcHJlZGljdChyYW5kb21fZm9yZXN0X3JlZml0LCB0ZXN0LCB0eXBlID0gInByb2IiKVssIDJdDQoNCnRocmVzaG9sZCA8LSAwLjUNCg0KcmFuZG9tX2ZvcmVzdF9yZWZpdF9wcmVkaWN0aW9uc190aHJlc2hvbGQgPC0gaWZlbHNlKHJhbmRvbV9mb3Jlc3RfcmVmaXRfcHJlZGljdGlvbnMgPiB0aHJlc2hvbGQsIFRSVUUsIEZBTFNFKQ0KDQpyYW5kb21fZm9yZXN0X3JlZml0X21ldHJpY3MgPC0gZ2V0X21ldHJpY3MocmFuZG9tX2ZvcmVzdF9yZWZpdF9wcmVkaWN0aW9uc190aHJlc2hvbGQsIHRlc3QkaGFzX2NhcmQsICJSYW5kb20gRm9yZXN0IChUdW5lZCkiKQ0KcmFuZG9tX2ZvcmVzdF9yZWZpdF9tZXRyaWNzDQoNCmBgYA0KDQpEaWUgU2NvcmVzIGF1ZiBkZW0gVGVzdGRhdGVuIGZhbGxlbiB3aWUgenUgZXJ3YXJ0ZW4gd2FyIGV0d2FzIHRpZWZlciBhdXMgYWxzIGRpZSBnZW1pdHRlbHRlbiBUcmFpbiBTY29yZXMuDQpEaWUgQWNjdXJhY3kgYmxlaWJ0IGplZG9jaCBub2NoIMO8YmVyIDAuOC4NCg0KDQpgYGB7cn0NCm1ha2Vfcm9jX3Bsb3RfYW5kX2dldF9hdWMocmFuZG9tX2ZvcmVzdF9yZWZpdF9wcmVkaWN0aW9ucywgdGVzdCRoYXNfY2FyZCkNCmBgYA0KDQpBdWNoIGRpZSBST0MgS3VydmUgdW5kIGRlciBBVUMgV2VydCBmw6RsbHQgZXR3YXMgdGllZmVyIGF1cywgaXN0IGplZG9jaCB2ZXJnbGVpY2hiYXIgd2llIGRhcyB2b3JoZXJpZ2UgU2FtcGxlIGF1cyBkZW0gdHJhaW4vdmFsIHNhbXBsZS4NCg0KIyMgTWl0IE9mZi1UaW1lDQoNCiMjIE9obmUgT2ZmLVRpbWUNCg0KIyBGYXppdA0KDQojIyBNZWhyd2VydCBkZXMgTW9kZWxscyBpbiBkZXIgUHJheGlzDQoNCkJlaSB1bnNlcmVtIE1vZGVsIGhhbmRlbHQgZXMgc2ljaCB1bSBlaW4gUHJvZHVjdCBBZmZpbml0eSBNb2RlbC4NCkVzIHNvbGwgdm9yYXVzc2FnZW4sIG9iIGVpbmUgUGVyc29uIChoaWVyIGVpbmUgS3VuZDppbiBkZXIgQmFuaykgZWluIGJlc3RpbW10ZXMgUHJvZHVrdCBrYXVmdCAoaGllciBlaW5lIEtyZWRpdGthcnRlKSBvZGVyIG5pY2h0Lg0KQXVzc2VyZGVtIGdpYnQgdW5zZXIgTW9kZWxsIGF1Y2ggYW4sIG1pdCB3ZWxjaGVyIFdhaHJzY2hlaW5saWNoa2VpdCBzaWUgZGllc2Uga2F1ZnQuDQpEaWVzIGvDtm5udGUgdm9uIGdyb3NzZW0gTWVocndlcnQgZsO8ciBlaW5lIEJhbmsgc2VpbiwgZGEgc2llIGFuaGFuZCBkZXMgTW9kZWxscyBkaWUgTWFya2V0aW5nLVN0cmF0ZWdpZSBvcHRpbWllcmVuIHVuZCBpaHJlIFJlc3NvdXJjZW4gZ2V6aWVsdGVyIGVpbnNldHplbiBrw7ZubmVuLg0KDQpFcyBrYW5uIEJhbmtlbiBoZWxmZW4sIGlocmUgTWFya2V0aW5nLUJlbcO8aHVuZ2VuIGJlc3NlciB6dSBzZWdtZW50aWVyZW4sIGluZGVtIGVzIHplaWd0LCB3ZXIgd2FocnNjaGVpbmxpY2ggYW4gZWluZXIgS3JlZGl0a2FydGUgaW50ZXJlc3NpZXJ0IGlzdCB1bmQgd2VyIG5pY2h0Lg0KRGllcyBrYW5uIGRhenUgYmVpdHJhZ2VuLCBkaWUgQ29udmVyc2lvbi1SYXRlIHp1IHZlcmJlc3Nlcm4gdW5kIGRpZSBLb3N0ZW4gZsO8ciBNYXJrZXRpbmctQWt0aW9uZW4genUgc2Vua2VuLg0KDQpFaW4gd2VpdGVyZXIgVm9ydGVpbCwgZGVuIGVpbiBQcm9kdWN0IEFmZmluaXR5IE1vZGVsIGJpZXRlbiBrYW5uLCBpc3QsIGRhc3MgZXMgQmFua2VuIGhlbGZlbiBrYW5uLCBpaHJlIEt1bmRlbmJlemllaHVuZ2VuIHp1IHZlcmJlc3Nlcm4sIGluZGVtIGVzIGlobmVuIGVybcO2Z2xpY2h0LCBwZXJzb25hbGlzaWVydGUgQW5nZWJvdGUgdW5kIFNlcnZpY2VzIGFuenViaWV0ZW4uDQoNCldlbm4gZGFzIE1vZGVsbCB2b3JoZXJzYWd0LCB3ZXIgd2FocnNjaGVpbmxpY2ggZWluZSBLcmVkaXRrYXJ0ZSBrYXVmZW4gd2lyZCwga8O2bm5lbiBCYW5rZW4gaWhyZW4gS3VuZGVuIHBlcnNvbmFsaXNpZXJ0ZSBBbmdlYm90ZSB1bmQgU2VydmljZXMgYW5iaWV0ZW4sIGRpZSBhdWYgaWhyZSBpbmRpdmlkdWVsbGVuIEJlZMO8cmZuaXNzZSB1bmQgVm9ybGllYmVuIGFiZ2VzdGltbXQgc2luZC4NCkRpZXMga2FubiBkYXp1IGJlaXRyYWdlbiwgZGllIEt1bmRlbnp1ZnJpZWRlbmhlaXQgenUgZXJow7ZoZW4gdW5kIGRpZSBLdW5kZW5iaW5kdW5nIHp1IHN0w6Rya2VuLg0KRGFmw7xyIG3DvHNzdGUgZGFzIE1vZGVsbCBhYmVyIG5vY2ggZXJ3ZWl0ZXJ0IHdlcmRlbi4NCg0KRWluIHBlcnNvbmFsaXNpZXJ0ZXMgQW5nZWJvdCBrw7ZubnRlIGJlaXNwaWVsc3dlaXNlIGVpbmUgS3JlZGl0a2FydGUgc2VpbiwgZGllIHNwZXppZWxsIGF1ZiBkaWUgQmVkw7xyZm5pc3NlIHVuZCBWb3JsaWViZW4gZWluZXMgS3VuZGVuIGFiZ2VzdGltbXQgaXN0LCB6LkIuDQptaXQgZWluZW0gaG9oZW4gUsO8Y2t6YWhsdW5nc3Byb3plbnRzYXR6IGbDvHIgYmVzdGltbXRlIEthdGVnb3JpZW4gdm9uIEVpbmvDpHVmZW4gb2RlciBtaXQgUmVpc2V2ZXJzaWNoZXJ1bmdlbiB1bmQgYW5kZXJlbiBWb3J0ZWlsZW4sIGRpZSBmw7xyIGRlbiBLdW5kZW4gYmVzb25kZXJzIHdpY2h0aWcgc2luZC4NCg0KSW5kZW0gQmFua2VuIGlocmVuIEt1bmRlbiBwZXJzb25hbGlzaWVydGUgQW5nZWJvdGUgdW5kIFNlcnZpY2VzIGFuYmlldGVuLCBrw7ZubmVuIHNpZSBpaHJlIEJlemllaHVuZ2VuIHp1IGlobmVuIHN0w6Rya2VuIHVuZCBpaHJlIFp1ZnJpZWRlbmhlaXQgZXJow7ZoZW4uDQo=